大量のデータを必要とするAIを効率よく運用するには

今回は「大量のデータを必要とするAIを効率よく運用するには」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 データが新しい石油だとすれば、大量のデータを必要とするAIは「データという『ガソリンをどか食いする存在』だ」と調査会社Constellation Researchの主席アナリストAndy Thurai氏は言う。しかしデータの大量消費は、その過程で品質が損なわれるリスクがあり、AIの信頼性に問題が生じる。

 このような問題を修正するには、データのキュレーションと品質保証が必要であり、業務上の問題に集中すべき人々の時間を、大量に浪費することになる。Thurai氏は「ほとんどのデータサイエンティストが、実際のモデルの作成とテストよりも、データのキュレーションや整理に時間を費やしている」と語った。

 それでもAIエンジンを動かすには、膨大なデータが必要となる。Thurai氏によれば、課題は「AIおよび機械学習(ML)に欠落のあるデータを入力した場合、その企業の限定的なビューしか得られない」ことだとし、「企業が生み出すデータは十分以上だが、そのデータは業務ユニット、分野、プラットフォームに加え、クラウドなのかプライベートデータセンターなのかといった実装間で細かく断片化されている」と説明した。

 問題は組織が大急ぎでAIに突進していることだ。IT最適化サービスを手がけるSHI Internationalで、リード・テクニカル・ソリューション・エンジニアを務めるMichael Heath氏は「多くの企業が根底にあるデータ品質問題に対処するなどの努力をせず、最も目に付く既存の問題にテクノロジーを投入すべく、躍起になりすぎている」と語る。「これには正確で一貫性のある完全なデータが求められる。堅牢なデータガバナンスとデータ管理の実践がなければ、組織はエラーを増幅させ、信頼できないインサイトを生むリスクがある」という。

 データガバナンスにおいては、適切なデータが適切な人やアプリケーションに送られ、そのデータが適時性や関連性を備え、安全かつ価値があることを保証するため、全員の協力が必要になる。

 長年にわたってデータ品質は最優先事項となってきたが、AIやトレーニングモデルに不可欠なデータを特定することも課題となっている。マスターデータ管理ソリューションのStibo Systemsで、最高製品責任者(CPO)を務めるNeda Nia氏はこの「本質的なデータ」について、「適切に管理され、機械学習モデルのトレーニングに最適な結果をもたらすものを真に示すデータ」と定義した。

 品質は重要であり、データとAIの両方のレベルで協調的なガバナンスが求められる。これにより「生成AI時代のデータ管理と配信を再形成する変革の力」が生まれると、データカタログ製品を手がけるAlationの最高技術責任者(CTO)Junaid Saiyed氏は語り、「生成AIにおけるデータの処理ペース、膨大なスケール、入り組んだ複雑さには、強固なAIガバナンスフレームワークが必要だ。効果的なAIガバナンスを通じて、組織はガベージイン・ガベージアウトのジレンマを克服できる」と説明する。

 もちろん高品質のデータがどこからともなく湧いてくるわけではない。Nia氏によれば「高品質のデータを維持する上で主要な課題は、要件の予測不能な性質にある。『AIに適したデータとは何か』『将来どのモデルがそのデータを必要とするのか』『モデルでの最適な処理のためにどれほど前のデータを保持すべきか』といった問題だ」という。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
TuSimpleのIPO申請で明らかになった中国と関係がある自動運転スタートアップのハードル
モビリティ
2021-03-27 08:17
2020年は「“境界線防御”の破綻」の年だった–トレンドマイクロ
IT関連
2021-01-22 22:13
2021年に押さえておきたい8つのアナリティクス業界トレンド
IT関連
2021-01-25 22:03
第2回:Sales DX総点検–営業偏重組織からの脱却
IT関連
2022-09-14 01:58
オラクル、「Java 22」をリリース–12のテーマを反映
IT関連
2024-03-22 00:14
中国政府が米EV大手Teslaを指導 異常加速や電池発火指摘
IT関連
2021-02-11 06:41
グローバル戦略を推進する人事システムの狙い–小野薬品工業の導入プロジェクト
IT関連
2024-06-27 08:11
4月は日銀のETF買いなし–上がるも下がるも外国人次第の日本株に逆戻り
IT関連
2021-04-14 09:57
中国の音声AI大手が取り組むAIによる方言保護
IT関連
2022-11-19 00:15
ヤフー、使用済みIT資産の再生・再利用サービスを導入
IT関連
2022-11-17 01:05
日本のセキュリティ市場が初の1兆円突破に–IDC予測
IT関連
2024-03-08 21:43
ツイッターが予定するサブスクサービスの充実を狙い広告を取り除きページを読みやすくするScrollを買収
ネットサービス
2021-05-06 13:03
保管・管理と受け取りのツール使い分けで8割以上が効率低下を実感–ウイングアーク1st
IT関連
2022-07-07 22:53
不妊治療サポートのFuture Familyが9.8億円調達、コロナ禍で混み合うクリニックのネットワークを拡大
フェムテック
2021-05-26 16:42