エージェントはどれも同じではありません
優先事項は、パーソナル エージェントの場合はワットあたりの最大エージェント数、エンタープライズ エージェントの場合は高性能エージェントの最大数、テクニカル コンピューティング エージェントの場合はエージェントあたりの最大パフォーマンスです。
エージェント ラックのニーズはどれも同じではありません
ハイパースケール展開では CPU のみの分離型ラックがエージェントを実行し、エンタープライズ展開ではオールインワン ラックが CPU と GPU を 1 つのシステムに統合して大規模にエージェントを実行します。
ニーズに合わせて構成
AMD Helion は、エージェント型 AI 向けに特別に設計されたオープンなラックスケールのリファレンス デザインであり、AMD EPYC™ 9006 シリーズ サーバー向け CPU を搭載します。CPU のみのハイパースケール構成、または CPU ブレードと GPU ブレードを組み合わせたエンタープライズ構成のいずれかを選択できます。どちらも OCP 規格に準拠しています。エージェントのニーズに最適な構成とブレード オプションを選択できます。
CPU のみのエージェント ラック
ハイパースケール構成
大規模なエージェント展開やワットあたりのエージェント数の最適化を必要とするハイパースケーラー、ネオクラウド、ソブリン AI オペレーター向けに設計された、CPU のみのラック。ラック内で CPU ブレードを組み合わせて、ワットあたりの多様なエージェント数をサポートできます。
パーソナル エージェント
高密度サーバー
256 コア @ 400 W
エンタープライズ エージェント
バランス重視のサーバー
256 コア @ 600 W
テクニカル エージェント
高性能サーバー
96 コア、高周波
CPU + GPU エージェント ラック
エンタープライズ構成
エージェントの推論要求を、クラウドで実行するフロンティア モデルまたは同じラック内で実行するオープンソース モデルにインテリジェントにルーティングします。エンタープライズ構成では、CPU のみのハイパースケール構成と同様のインフラストラクチャを使用し、エージェントのニーズに合わせて CPU ブレードと GPU ブレードを組み合わせて使用します。
エージェント CPU ブレード
大量の処理を実行するエージェントや、高速で低レイテンシを必要とするテクニカル コンピューティング エージェント向けに、高密度および高性能なオプションを提供します。
高密度サーバー
AMD EPYC™ 9006
256 コア @ 400 W
バランス重視のサーバー
AMD EPYC™ 9006
256 コア @ 600W
高性能サーバー
AMD EPYC™ 9006
96 コア @ 5.0 GHz
GPU 推論ブレード
ラックに GPU 推論を追加して、要求の厳しいエージェント型ワークフローをサポートします。
高性能サーバー
AMD Instinct™ MI350P
汎用ブレード
エージェントが作業を完了するために使用するデータベース、ストレージ、テクニカル コンピューティングのワークロードをサポートします。
データベースとストレージ サーバー
AMD EPYC™ 9006 SP7 および 9006 SP8 サーバー向け CPU
テクニカル コンピューティング
AMD EPYC™ 9006X SP7 サーバー向け CPU
仕様
大量のエージェント型ワークロード向けの設計
21 インチ ORv3 44OU DLC および空冷ラック、ネイティブで OCP に準拠
多様な混合エージェント フリートをサポートできるよう完全にプログラム可能
AMD Helion パートナー
大手 OEM および ODM が採用
よくある質問 (FAQ)
ハイパースケーラーのニーズと企業のニーズは根本的に異なります。ハイパースケーラーは、エージェントをきわめて大規模に展開し、ワットあたりのエージェント数を最適化し、既に別々の高速インフラストラクチャを運用しています。これに最適なのは CPU のみのラックです。企業は通常、2 つの別々のラックを設置することなく、エージェント用のコンピューティングとアクセラレーションの両方を提供する単一のラックを求めています。
はい、そのように設計されています。エージェントの構成に合わせて CPU ブレードを混在させることができ、エンタープライズ構成では GPU ブレードも併せて追加できます。
AMD Instinct™ MI350P です。5U サーバーに 8 基の GPU を搭載できます。ラックには 2 台の GPU サーバーを収納でき、合計 16 基の GPU (8 基ずつのノードが 2 つ) を搭載できます。この 2 つのノードは独立して動作し、両者の間にスケールアップ用の GPU ファブリックは存在しません。この構成はフロンティアスケールのトレーニングではなく、エンタープライズ向けのエージェント ワークロードとアクセラレーション向けに設計されているためです。
ラックおよびバスバーについては Orv3、ホスト プロセッサ モジュールについては DC-MHS、管理とセキュリティについては DC-SCM、電源シェルフについては HPRv2、ネットワークについては OCP NIC 3.0、シリコンの信頼のルートについては Caliptra です。すべてのレイヤーで準拠しています。たまたま OCP に合致したラック フレームではありません。
いいえ、それぞれ異なるニーズに対応します。AMD Helios™ は、スケールアップ GPU ドメインを統合することで、フロンティアスケールの AI トレーニングと大規模推論に対応できるよう構築されています。AMD Helion のエンタープライズ構成は、単一のラックで推論を実行するエージェント用インフラストラクチャを必要とする企業向けです。
リソース