生成AI市場で話題の「蒸留」とは? 関連を指摘されるDeepSeekの最新情報

今回は「生成AI市場で話題の「蒸留」とは? 関連を指摘されるDeepSeekの最新情報」についてご紹介します。

関連ワード (CIO/経営、PDF Report at ZDNet Japan等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 生成AI市場においてOpenAIの優位性が固まったかに見えたところで、急速に存在感を示しているのが中国AI開発企業であるDeepSeekだ。DeepSeekが開発した大規模言語モデルの「DeepSeek-R1」は、OpenAIの同等モデル「o1」と比べて、運用コストが大幅に低いと言われる。性能面でもDeepSeek-R1は、数学的推論やプログラミングにおいて、OpenAIのモデルと同等以上の性能を示すという。

このほか、DeepSeekはオープンソースで提供し、開発者や研究者が自由に利用し、改良、再配布できるようにしていること、高性能なチップを使わなくても低コストでトレーニングできる点などが指摘されている。

生成AI領域では、現在「蒸留」という言葉が話題を集めている。これは、大規模な生成AIモデルを小型化し、推論速度を向上させながら精度を維持するための技術である。具体的には、大規模かつ高性能な「教師モデル」から知識を抽出し、それをパラメーター数の少ない「生徒モデル」として移転することを指す。DeepSeekもこの手法を用いることで、安価かつ高い性能を持つAIモデルを構築したのではないかと指摘されている。

AI向けGPUで一強とも言われたNVIDIAの株価が、DeepSeekの登場による高性能半導体への需要減少見込みにより、急落したことなどでも話題となった。DeepSeekについての最新情報が分かる記事を集めた。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
セルフ型トラックレンタルマーケットプレイスFetchが事業拡大で約4億円調達
IT関連
2022-03-07 10:15
Perplexity、「対話型検索」に特化した新しいブラウザーのリリースを予告
IT関連
2025-02-26 21:15
ガートナーが示す新キーワード「ジェネレーティブ」とは
IT関連
2022-04-19 07:31
グーグル、新たな追跡技術「Topics」を発表–不評の「FLoC」は廃止
IT関連
2022-01-27 20:12
AWS、日本独自で生成AIの大規模言語モデル開発支援策を展開
IT関連
2023-07-05 02:43
爆発的成長で快進撃–「Python」はいかにして最も有力な言語になったのか
IT関連
2021-07-10 14:37
2028年までにエンタープライズソフトウェアエンジニアの75%がAIコードアシスタントを利用するとの予測。ガートナー
プログラミング言語
2024-04-12 01:32
Sansan、中小企業向け名刺管理サービスを「kintone」と連携
IT関連
2023-06-13 06:25
正社員のテレワーク実施率、コロナ拡大後で最低の22.2%に–パーソル総合研究所
IT関連
2023-08-18 05:10
OS、プログラミング言語、ソフトを選ばない、マイクロソフトのコードエディター「Visual Studio Code」
IT関連
2021-02-16 14:57
可視化から得る「洞察」をどう業務改善に用いるか
IT関連
2022-08-03 15:29
仕事とプライベートを切り離したい人へ、5つのアドバイス
IT関連
2023-11-01 07:57
NEC、顔認証ソフトウェアの最新版を発売–VDIに本格対応
IT関連
2024-03-23 12:54
データ仮想化のイノベーションをリードしていく–Denodo、2022年度の事業方針
IT関連
2022-03-05 06:48