日立造船、IoT基盤と連動するデータ分析/機械学習システムの運用を効率化

今回は「日立造船、IoT基盤と連動するデータ分析/機械学習システムの運用を効率化」についてご紹介します。

関連ワード (ビッグデータ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 日立造船は、IoT基盤のデータ分析課題に対応するため、データブリックス・ジャパンのデータ分析基盤「レイクハウスプラットフォーム」を導入した。メソドロジックが導入を支援した。

 日立造船は、同社のIoT基盤と連動するデータ分析/機械学習システムの運用を効率化するとともに、この分析基盤を用いたデータ活用を実施していく。

 データブリックスは、オープンソースの分散処理エンジン「Apache Spark」を活用するプラットフォームを提供する。ストリーミング処理とバッチ処理の両方に対応。また、Spark向けに特化したストレージソフト「Delta Lake」により、信頼性のある高速なデータパイプラインを構築可能という。

 またデータサイエンティスト向けにはオープンソースの機械学習基盤「MLflow」を使用して、ノウハウの共有やデータの調査、モデルの構築を一元化できる環境になっている。

 日立造船では、IoTと連動したデータ分析、機械学習システムの導入/運用を検討、実施していくに当たり、「大量データの分析に関する不安」「データ分析者の育成」「機械学習でのモデル管理・スムーズなデプロイ環境」などに課題を抱えていた。

 大量データの分析については、これまでIoTで収集したデータによる特徴量抽出などを個人のローカル環境で実施してきた。しかし、データ分析者が処理するデータ量の増加に伴い、ローカル環境では対処が困難なケースが発生するようになっていた。

 データ分析者については、それぞれの案件で得たナレッジを展開するインフラ整備が十分になされておらず、PythonやSQLを用いた分析内容についてナレッジを効率的に共有することが困難な状況だった。

 機械学習でのモデル管理では、蓄積したデータを十分に活用することができる、機械学習のCI/CD(継続的なインテグレーション/デリバリー)環境が求められていた。

 これに対して、メソドロジックは日立造船の要件詳細をヒアリングした上で、データブリックスのレイクハウスプラットフォームによる課題解決を提案した。

COMMENTS


25021:
2021-05-01 18:10

基本的にルナルナによるビッグデータはあてにならないと思っているので、生理の貧困でナプキンを配るなら、受け取った人にアンケートを答えてもらって、きちんと無月経や月経周期が極端な人の数を把握した方が良いように思うよ。

25025:
2021-05-01 16:41

実態/内科の名医でも、一回の診察で正しい診断を下せるのは60%と言われています。だから、確かにビッグデータの収集と分析が進めば機械が人間を超える可能性はあります。現在の人間による診断では 小児科医の仕事は「医療というより、むしろ親とのコミュニ…

25024:
2021-05-01 14:24

とても浅はか。 全く中華を庇うわけじゃないですが、ビッグデータを各国のトップ企業で高度解析していくことは、必然的というか、より便利な技術を生み出す条件に…

25030:
2021-05-01 12:03

えー、ビッグファイアBOOTHの方ですが『源氏香4』のダウンロード版が無い仕様になっておったのにも今日まで気づきませんで、データで買いたかった方がいましたらまことに失礼しました。一部で本間本願寺最高傑作との評も高い本作、買えるよう…

25023:
2021-05-01 10:18

ビッグデータの覇者たち (講談社現代新書) (海部美知) が、Kindleストアのセールでさらに149ポイント増の、770円(8%OFF)+385ポイント還元になりました。水曜まで。

25031:
2021-05-01 09:42

確かに残酷ではあるが実は昔から探査衛星とかでやってる事と同じではあるのよね もしドローンひとつひとつに学習型AIが積まれていて、こういう経験をビッグデータとして貯め込みつつ将来自我に目覚めたら 何を思うかな

25026:
2021-05-01 09:08

えー、ビッグファイアBOOTHの方ですが『源氏香4』のダウンロード版が無い仕様になっておったのにも今日まで気づきませんで、データで買いたかった方がいましたらまことに失礼しました。一部で本間本願寺最高傑作との評も高い本作、買えるようになった…

25029:
2021-05-01 08:56

scipyのttest_relを使えばp値を算出できる? p値自体は簡単に求められるけど、取り扱いには注意。ビッグデータを扱う場合は、標本数が多いからp値はやたら低くなりやすい。 p値による検定結果を鵜呑みにせず、目的に応じてその…

25022:
2021-05-01 06:22

AI Insideの株価下落が話題だけど、曲がりなりにもIT業界にお勤めの身からすると、クラウド(苦笑)→ビッグデータ(半笑)→AI(???)な感じ。商材はボヤっとしててなんかすごい感じが出せてればいいんだよねw 少し前に話題にな…

25028:
2021-05-01 05:06

scipyのttest_relを使えばp値を算出できる? p値自体は簡単に求められるけど、取り扱いには注意。ビッグデータを扱う場合は、標本数が多いからp値はやたら低くなりやすい。 p値による検定結果を鵜呑みにせず、目的に応じてその有意差をどう扱うか考…

25027:
2021-05-01 03:59

うんこやちんこは面白けれど、まんこは面白くない という漠然とした感覚は、ニコニコ淫夢の10年以上にわたるデータとして、目に見える形で現れている。 ニコニコ淫夢の表層を攫うだけで「使いにくい下ネタ」が見て取れるので、下ネタを研究するには、この…

25032:
2021-05-01 03:00

【続き】 一文目 ライフタイムバリューを最大化する営業になりたい 根拠 KDDIは株主に以下のように言っています 世の中を取り巻く環境は大きな変革期にあり、5G(第5世代移動通信システム)/IoT、AI・ビッグデータをはじめと…

Recommended

TITLE
CATEGORY
DATE
今からクラウドビジネスに参入する組織とビジネスマンのための、クラウド技術トレンド解説。クラウドファーストからクラウドネイティブへの潮流[PR]
PR
2021-05-12 11:47
ウクライナ政府が創設、有志が集う「IT軍」–かつてない局面に新たな問題も
IT関連
2022-03-05 04:41
「ChatGPT」の使用に伴う6つのリスク、研究者らが指摘
IT関連
2023-05-19 21:52
創業から100店舗超え–無人店舗の仕掛け人・TTG阿久津社長に聞く、ニーズと夜明け
IT関連
2024-07-23 12:17
「Skype for Business Online」終了まで1カ月–マイクロソフトが注意喚起
IT関連
2021-07-06 05:16
マルチクラウド本格化時代を見据えるヴイエムウェアの戦略
IT関連
2023-08-30 22:04
マイクロソフト、400万ドルのバグ報奨金をかけたイベント開催へ
IT関連
2024-11-23 08:45
GitHub、「Secure Code Game」シーズン2提供–ゲーム形式のセキュリティトレーニング
IT関連
2024-02-18 18:49
BLEスキャンでバスの混雑度を計測 専用サイトにリアルタイム表示 ナビタイムが実験
企業・業界動向
2021-01-13 15:58
同僚や部下には今さら聞けない–「Kubernetes」で知っておきたいこと
IT関連
2021-07-17 14:55
パロアルトネットワークス製品に複数の脆弱性、限定的な攻撃も発生
IT関連
2024-11-21 21:26
QuikNodeがAWSに対抗のブロックチェーン開発クラウドプラットフォームを開発中
ブロックチェーン
2021-04-04 16:43
熊谷組、働き方改革で設計部門などにモバイルワークステーションを導入
IT関連
2024-01-27 17:50
THE SEEDが上場企業経営経験者が「インターン」メンターとして参画するプログラムをClubhouseで開始
VC / エンジェル
2021-02-19 20:05