SambaNova、富岳で学習した「Fugaku-LLM」を「Samba-1 CoE」のエキスパートに

今回は「SambaNova、富岳で学習した「Fugaku-LLM」を「Samba-1 CoE」のエキスパートに」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 SambaNova Systemsは5月13日、「Fugaku-LLM」を「Samba-1 Composition of Experts(CoE)」のエキスパートとして導入したと発表した。エキスパートとは特定の分野に特化したモデルのこと。

 Fugaku-LLMは、スーパーコンピューター「富岳」で学習され、日本語能力を強みとする大規模言語モデル(LLM)。5月10日に「Hugging Face」や「GitHub」にて公開されている。

 SambaNova独自のCoEアーキテクチャーは、複数の専門家モデルを集約し、用途に応じて最適なエキスパートを選択することでパフォーマンスと精度を向上させる。Fugaku-LLMはCoEアーキテクチャー上に実装され、3層のメモリーとデータフローアーキテクチャーを持つSambaNovaの「SN40L」システム上で最適に動作するという。

 「富岳によってゼロからから大規模に学習された日本語のLLMであるFugaku-LLMが、SambaNovaのCoEにいち早く導入され、多くの人が富岳の成果を利用できるようになることは大変喜ばしい」と理化学研究所計算科学研究センターでセンター長を務める松岡聡氏はいい、「SambaNovaのCoEの柔軟性と拡張性の高さは、世界のスーパーコンピューターによるLLM学習の成果をホストする基盤として大いに期待できる」とした。

 SambaNova Systemsの共同創業者で最高経営責任者(CEO)のRodrigo Liang氏は、「SambaNovaのSamba-1 CoEは、オープンソースによるベストオブブリード戦略を採用しており、常に世界最高水準で最速のAIモデルにアクセスできるようにしている」とし、「今回、日本が誇る富岳でスクラッチから学習されたFugaku-LLMをCoEのエキスパートの一つとして加えたことは、この戦略に合致している。富岳の成果をいち早く取り入れられたことを大変うれしく思う」と述べた。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
日本企業のDXは構想から推進段階に移行–ITR調査速報
IT関連
2022-10-08 20:06
日立ソリューションズ、IoT活用で作業員の安全管理を支援–労働災害の防止へ
IT関連
2021-06-14 21:25
企業が責任を持って活用できる生成AIで経営のAI Innovationを加速–グーグル・クラウド・平手氏
IT関連
2024-01-11 00:11
エイベックス、音で街を拡張する「音声AR」–IP組み合わせヒットコンテンツ創出へ
IT関連
2024-10-10 09:49
打ち上げオペレーションを軸に宇宙事業を近代化するEpsilon3が約3.2億円のシード資金を調達
IT関連
2022-02-15 09:23
NASAがハッブル宇宙望遠鏡を約1カ月ぶりに復旧・再稼働、科学観測を再開
宇宙
2021-07-21 10:33
TVアニメ「鬼滅の刃」、ABEMAで全26話を無料配信 ゴールデンウィーク期間に
くらテク
2021-04-28 15:00
量子コンピューティングの基本知識–仕組み、過度の期待が抱えるリスク、技術的課題
IT関連
2022-08-13 18:45
レッドハットとSUSEもロシアで販売やサービス停止を表明
IT関連
2022-03-11 01:46
Alphabet傘下のDeepMind、ほぼすべてのタンパク質の立体構造をAIで予測
IT関連
2022-07-30 18:09
ポケモンGO、購入アイテムの反映が遅れる不具合発生で「GOフェス」への影響は?
くらテク
2021-07-15 08:56
メルカリUS、即日配送を全米展開 Uberと連携
ネットトピック
2021-07-22 20:01
DNP、サプライチェーンのリスク管理クラウドを導入–持続可能な調達体制を強化
IT関連
2024-07-31 09:21
光ネットワークの導入本格化は2025年から–NECが事業動向を説明
IT関連
2024-12-03 07:44