AIによるLinuxカーネルのチューニング–バイトダンスの新たな試み

今回は「AIによるLinuxカーネルのチューニング–バイトダンスの新たな試み」についてご紹介します。

関連ワード (ソフトウェア等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 「TikTok」などを運営する字節跳動(バイトダンス)のLinuxカーネルエンジニアであるCong Wang氏は、Linuxカーネルのトップ開発者が集まる招待制のカンファレンスであるLinux Plumbers Conferenceで、ワークロードに合わせて最善の結果が得られるように、人工知能(AI)と機械学習を使ってLinuxカーネルをチューニングすることを提案した。

 一般的な話で言えば、Linuxカーネルはほぼどのようなタスクにも問題なく使えるが、特定の作業で最大の効果を上げるには、微調整して最善の結果が得られるようなパラメーターを設定する必要がある。ただし、このアプローチには1つだけ小さな問題がある。それは、パラメーターの数が何千にも及ぶことだ。Linuxの専門家であっても、最適なパフォーマンスを得るためのチューニング作業には時間と手間がかかる。しかも、ワークロードが変われば、また別のパラメータ群に別のチューニングを施さなければならない。Wang氏は、「バイトダンスが持っているような大規模なデータセンターには何百もの異なるワークロードがあり、それらのLinuxカーネルのパラメーターを手動で調整することは、今やほとんど不可能になっている」と述べた。

 「System Management Interface Tool」(SMIT)や「Sysctl」、「TuneD」などのツールはそうした作業の役に立つが、手動で行うカーネルチューニングの変更作業が簡単になるにすぎない。Red Hatの「BayOp」のように、機械学習を使ってネットワークアプリケーションの効率を最適化することに特化した「賢い」プログラムもあるが、これは汎用のAI/機械学習ツールではなく、特定の種類のチューニングにしか使えない。

 バイトダンスは、最小限のエンジニアリングで、Linuxカーネルのパラメーターをチューニングするプロセス全体を自動化する初めての試みに取り組んでいる。具体的に言えば、バイトダンスがやろうとしているのは、Linuxのメモリー管理のチューニングだ。しかも同社によれば、ベイズ最適化などの機械学習アルゴリズムを使用した自動チューニングは、ほとんどの場合、Linuxカーネルエンジニアによる手動のチューニングに優るという。

 同社はなぜこのような取り組みを行っているのだろうか。Wang氏が皮肉を込めて言ったように、このアイデアは 「Linuxカーネルエンジニアを廃業に追い込む」ためのものではない。その目的は、より良い意思決定のために過去のデータを生かしつつ(人間はこれを苦手としている)、「人間のエンジニアを、個々のワークロードごとにパフォーマンスをチューニングする作業から解放する」ことだという。そしてもう1つ重要なのが、現在の試行錯誤による方法よりも優れた解決策を見つけることだ。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
ピクセルカンパニーズ、生成AI向けコンテナー型データセンターを発表
IT関連
2024-08-24 13:09
凸版印刷、金融DXを推進するBaaS事業でインフキュリオンと協業
IT関連
2021-03-10 06:13
Chrome DevToolsにもGeminiを搭載へ。エラーの解決策などAIが支援
Chrome
2024-05-16 08:31
不正取引が「これまでになく」増加する中、Outseerは決済セキュリティツールに注力
セキュリティ
2021-06-13 00:15
Dropboxが作ったポストコロナの新たな仕事環境「Dropbox Studios」
ネットサービス
2021-07-10 17:25
テンプレートや塗り絵の生成で児童生徒の表現力強化–小中高向けAdobe Expressの新機能
IT関連
2024-08-08 13:48
CTC、NVIDIAの仮想空間開発プラットフォームを提供–3Dデータの共同編集が可能
IT関連
2022-02-09 04:53
WebAssembyとしてPostgreSQLをビルドした「PGlite」公開。Node.jsやブラウザ上でPostgreSQLを実行、DBの永続化も可能
JavaScript
2024-08-19 14:41
凸版印刷、鹿児島市の全小中学校に学習サービスを提供–教職員の負荷軽減
IT関連
2022-07-07 14:31
OTシステムや重要インフラを標的としたサイバー攻撃が増加–TXOne Networks
IT関連
2023-04-02 10:52
バーチャルキャストの無料版、個人・法人問わず商用利用OKに
企業・業界動向
2021-04-11 13:10
USJに「鬼滅の刃 XRライド」9月登場 VRゴーグル付け予測不能の「無限列車」へ
くらテク
2021-07-13 02:26
「Hot Chips」カンファレンス、議論の中心はAI処理向けプロセッサー
IT関連
2024-08-29 03:42
「ヘッドレス」eコマースプラットフォームFabricが早くもシリーズAで約45億円調達
ネットサービス
2021-02-11 00:52