SambaNova、富岳で学習した「Fugaku-LLM」を「Samba-1 CoE」のエキスパートに

今回は「SambaNova、富岳で学習した「Fugaku-LLM」を「Samba-1 CoE」のエキスパートに」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 SambaNova Systemsは5月13日、「Fugaku-LLM」を「Samba-1 Composition of Experts(CoE)」のエキスパートとして導入したと発表した。エキスパートとは特定の分野に特化したモデルのこと。

 Fugaku-LLMは、スーパーコンピューター「富岳」で学習され、日本語能力を強みとする大規模言語モデル(LLM)。5月10日に「Hugging Face」や「GitHub」にて公開されている。

 SambaNova独自のCoEアーキテクチャーは、複数の専門家モデルを集約し、用途に応じて最適なエキスパートを選択することでパフォーマンスと精度を向上させる。Fugaku-LLMはCoEアーキテクチャー上に実装され、3層のメモリーとデータフローアーキテクチャーを持つSambaNovaの「SN40L」システム上で最適に動作するという。

 「富岳によってゼロからから大規模に学習された日本語のLLMであるFugaku-LLMが、SambaNovaのCoEにいち早く導入され、多くの人が富岳の成果を利用できるようになることは大変喜ばしい」と理化学研究所計算科学研究センターでセンター長を務める松岡聡氏はいい、「SambaNovaのCoEの柔軟性と拡張性の高さは、世界のスーパーコンピューターによるLLM学習の成果をホストする基盤として大いに期待できる」とした。

 SambaNova Systemsの共同創業者で最高経営責任者(CEO)のRodrigo Liang氏は、「SambaNovaのSamba-1 CoEは、オープンソースによるベストオブブリード戦略を採用しており、常に世界最高水準で最速のAIモデルにアクセスできるようにしている」とし、「今回、日本が誇る富岳でスクラッチから学習されたFugaku-LLMをCoEのエキスパートの一つとして加えたことは、この戦略に合致している。富岳の成果をいち早く取り入れられたことを大変うれしく思う」と述べた。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
宇宙探査の技術を家庭に応用–NASAが民間と共同開発中の人型ロボット「Astra」
IT関連
2022-12-23 08:10
GitLab、「GitLab 17.0」リリース–「CI/CDカタログ」を一般提供
IT関連
2024-05-18 16:20
東京メトロも終電繰り上げ 緊急事態宣言受け
くらテク
2021-01-14 09:20
オラクル、次期Oracleデータベースの開発者向け無償版「Oracle Database 23c Free – Developer Release」提供開始。JavaScriptストアドプロシージャなど
Oracle
2023-04-06 11:52
ServiceNow、ワクチンの大規模配布を支援するソリューションを提供開始
IT関連
2021-01-26 13:08
アンリツ、SAPソリューションでEC開設とセキュリティ強化を実現
IT関連
2023-07-05 00:16
イベントマーケティングは「チームスポーツ」、Vendeluxは最高の投資利益率のために企業を指導
IT関連
2022-01-31 09:18
Synthesia、企業向けAI動画の作成を変革する「Synthesia 2.0」を発表
IT関連
2024-06-26 23:46
コロナワクチン接種、自治体の8割が11月までに完了か JX通信社調べ
ネットトピック
2021-07-28 16:47
クリエイターが所有するデジタルコミック、ニュースレター、IP管理プラットフォーム「Zestworld」
IT関連
2022-03-24 15:31
NEC、セキュリティ対策の問題を全体最適化で解消する新規事業
IT関連
2022-10-05 07:42
「学研の図鑑 スーパー戦隊」発売へ 全45のスーパー戦隊を網羅 巨大ロボットの透視図も
くらテク
2021-01-17 04:48
凸版印刷、物流業務のデータを集約し運用状況を可視化–管理業務の省力化に寄与
IT関連
2023-01-25 02:27
日米の違いから探るセキュリティ人材の雇用、育成、キャリアの在り方
IT関連
2023-07-08 09:20