フロンティアスーパーコンピューターが、AMD技術を駆使して1兆パラメーターの大規模言語モデル(LLM)を実行するという画期的な成果を達成しました。テネシー州のオークリッジ国立研究所に設置され、エネルギー省によって管理されているフロンティアは、この成果により、ChatGPT-4などの先進的なAIモデルと競合することになります。AMDの第3世代EPYC「トレント」CPUとInstinct MI250X AI GPUアクセラレータを搭載し、8,699,904コアを誇るフロンティアは、1.194エクサフロップスの性能を発揮し、計算能力の巨塔としての地位を確立しています。
フロンティアの優位性は、HPE Cray EXアーキテクチャとSlingshot-11インターコネクトの進歩にも負うところが大きく、Top500.orgリストでトップに輝いています。1兆パラメーターLLM実行の成功は、ハイパーパラメーターの微調整とトレーニングプロセスの最適化によるもので、3,000台の旧型Instinct MI250X AI GPUアクセラレータを使用してテストを重ねた結果です。
37,000台のMI250X GPUを搭載しているにもかかわらず、フロンティアチームはわずか3,000台のアクセラレータでこの記録的なLLM実行を達成しました。AMDがMI300 GPUアクセラレータを導入する予定であることから、将来の進歩に対する期待が高まっています。
フロンティアの1兆パラメーターLLM実行の成功は、スーパーコンピューティングの世界における重要な瞬間を象徴しています。技術的な進化が続く中で、AMDとフロンティアの協力関係は、フロンティアを世界的なリーダーとしての地位を固めるものです。GPUプールの一部を使用する効率性は、生成AIの分野でのさらなる革新の可能性を示しています。フロンティアは、最先端の技術と戦略的な最適化が融合したときの驚異的な可能性を示しています。AI、データサイエンス、GenAIの最新の革新については、Googleニュースでフォローしてください。
from World’s Most Powerful Supercomputer Achieves 1 Trillion Parameter LLM Run.