SambaNova、富岳で学習した「Fugaku-LLM」を「Samba-1 CoE」のエキスパートに

今回は「SambaNova、富岳で学習した「Fugaku-LLM」を「Samba-1 CoE」のエキスパートに」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 SambaNova Systemsは5月13日、「Fugaku-LLM」を「Samba-1 Composition of Experts(CoE)」のエキスパートとして導入したと発表した。エキスパートとは特定の分野に特化したモデルのこと。

 Fugaku-LLMは、スーパーコンピューター「富岳」で学習され、日本語能力を強みとする大規模言語モデル(LLM)。5月10日に「Hugging Face」や「GitHub」にて公開されている。

 SambaNova独自のCoEアーキテクチャーは、複数の専門家モデルを集約し、用途に応じて最適なエキスパートを選択することでパフォーマンスと精度を向上させる。Fugaku-LLMはCoEアーキテクチャー上に実装され、3層のメモリーとデータフローアーキテクチャーを持つSambaNovaの「SN40L」システム上で最適に動作するという。

 「富岳によってゼロからから大規模に学習された日本語のLLMであるFugaku-LLMが、SambaNovaのCoEにいち早く導入され、多くの人が富岳の成果を利用できるようになることは大変喜ばしい」と理化学研究所計算科学研究センターでセンター長を務める松岡聡氏はいい、「SambaNovaのCoEの柔軟性と拡張性の高さは、世界のスーパーコンピューターによるLLM学習の成果をホストする基盤として大いに期待できる」とした。

 SambaNova Systemsの共同創業者で最高経営責任者(CEO)のRodrigo Liang氏は、「SambaNovaのSamba-1 CoEは、オープンソースによるベストオブブリード戦略を採用しており、常に世界最高水準で最速のAIモデルにアクセスできるようにしている」とし、「今回、日本が誇る富岳でスクラッチから学習されたFugaku-LLMをCoEのエキスパートの一つとして加えたことは、この戦略に合致している。富岳の成果をいち早く取り入れられたことを大変うれしく思う」と述べた。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
ソフトバンクと日立が協業–生産状況を可視化するサービスの提供目指す
IT関連
2022-10-02 13:39
ハイブリッドワークのセキュリティ問題–新しい働き方に潜む脅威と求められる対策
IT関連
2023-05-19 22:03
部分最適からオペレーション全体の変革へ–コマツ、AWS活用で建設現場のDX推進
IT関連
2021-06-28 19:15
フェルミ研究所暗黒エネルギーサーベイチームが宇宙におけるダークマター分布の最大・詳細なマップを発表
宇宙
2021-06-02 12:31
ベネッセ、進研ゼミ教材の校正業務にレビューツール「Brushup」採用
IT関連
2021-02-06 15:25
日東電工、「SAP Fieldglass」導入で外部人材の調達・管理を強化
IT関連
2022-07-28 00:21
高速なPython互換言語「Mojo」を用いたAIプラットフォーム「MAX」発表。ModCon '23
Python
2023-12-06 17:37
PoCの問題は技術ではなく人や組織にある–ガートナーがエンジニアの将来を展望
IT関連
2024-04-04 10:48
Excelから発展–「Power Fx」から見えるローコード開発環境の未来
IT関連
2021-05-15 23:09
Gaudiyと大日本印刷、ブロックチェーンを活用したコンテンツビジネス・次世代のファンサービス構築を目指し業務提携
IT関連
2022-01-19 11:07
トーバルズ氏はビットコイン発明者"サトシ・ナカモト"ではない–一部で再浮上した話題の真相
IT関連
2022-02-06 20:06
日立パワーソリューションズ、風力発電設備向けのワンストップサービス提供へ
IT関連
2022-02-12 02:51
イベントマーケティングは「チームスポーツ」、Vendeluxは最高の投資利益率のために企業を指導
IT関連
2022-01-31 09:18
今すべき大切なことを見極め、実現を加速する年に–アバナード・鈴木代表
IT関連
2023-01-13 01:56