日立造船、IoT基盤と連動するデータ分析/機械学習システムの運用を効率化

今回は「日立造船、IoT基盤と連動するデータ分析/機械学習システムの運用を効率化」についてご紹介します。

関連ワード (ビッグデータ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 日立造船は、IoT基盤のデータ分析課題に対応するため、データブリックス・ジャパンのデータ分析基盤「レイクハウスプラットフォーム」を導入した。メソドロジックが導入を支援した。

 日立造船は、同社のIoT基盤と連動するデータ分析/機械学習システムの運用を効率化するとともに、この分析基盤を用いたデータ活用を実施していく。

 データブリックスは、オープンソースの分散処理エンジン「Apache Spark」を活用するプラットフォームを提供する。ストリーミング処理とバッチ処理の両方に対応。また、Spark向けに特化したストレージソフト「Delta Lake」により、信頼性のある高速なデータパイプラインを構築可能という。

 またデータサイエンティスト向けにはオープンソースの機械学習基盤「MLflow」を使用して、ノウハウの共有やデータの調査、モデルの構築を一元化できる環境になっている。

 日立造船では、IoTと連動したデータ分析、機械学習システムの導入/運用を検討、実施していくに当たり、「大量データの分析に関する不安」「データ分析者の育成」「機械学習でのモデル管理・スムーズなデプロイ環境」などに課題を抱えていた。

 大量データの分析については、これまでIoTで収集したデータによる特徴量抽出などを個人のローカル環境で実施してきた。しかし、データ分析者が処理するデータ量の増加に伴い、ローカル環境では対処が困難なケースが発生するようになっていた。

 データ分析者については、それぞれの案件で得たナレッジを展開するインフラ整備が十分になされておらず、PythonやSQLを用いた分析内容についてナレッジを効率的に共有することが困難な状況だった。

 機械学習でのモデル管理では、蓄積したデータを十分に活用することができる、機械学習のCI/CD(継続的なインテグレーション/デリバリー)環境が求められていた。

 これに対して、メソドロジックは日立造船の要件詳細をヒアリングした上で、データブリックスのレイクハウスプラットフォームによる課題解決を提案した。

COMMENTS


25021:
2021-05-01 18:10

基本的にルナルナによるビッグデータはあてにならないと思っているので、生理の貧困でナプキンを配るなら、受け取った人にアンケートを答えてもらって、きちんと無月経や月経周期が極端な人の数を把握した方が良いように思うよ。

25025:
2021-05-01 16:41

実態/内科の名医でも、一回の診察で正しい診断を下せるのは60%と言われています。だから、確かにビッグデータの収集と分析が進めば機械が人間を超える可能性はあります。現在の人間による診断では 小児科医の仕事は「医療というより、むしろ親とのコミュニ…

25024:
2021-05-01 14:24

とても浅はか。 全く中華を庇うわけじゃないですが、ビッグデータを各国のトップ企業で高度解析していくことは、必然的というか、より便利な技術を生み出す条件に…

25030:
2021-05-01 12:03

えー、ビッグファイアBOOTHの方ですが『源氏香4』のダウンロード版が無い仕様になっておったのにも今日まで気づきませんで、データで買いたかった方がいましたらまことに失礼しました。一部で本間本願寺最高傑作との評も高い本作、買えるよう…

25023:
2021-05-01 10:18

ビッグデータの覇者たち (講談社現代新書) (海部美知) が、Kindleストアのセールでさらに149ポイント増の、770円(8%OFF)+385ポイント還元になりました。水曜まで。

25031:
2021-05-01 09:42

確かに残酷ではあるが実は昔から探査衛星とかでやってる事と同じではあるのよね もしドローンひとつひとつに学習型AIが積まれていて、こういう経験をビッグデータとして貯め込みつつ将来自我に目覚めたら 何を思うかな

25026:
2021-05-01 09:08

えー、ビッグファイアBOOTHの方ですが『源氏香4』のダウンロード版が無い仕様になっておったのにも今日まで気づきませんで、データで買いたかった方がいましたらまことに失礼しました。一部で本間本願寺最高傑作との評も高い本作、買えるようになった…

25029:
2021-05-01 08:56

scipyのttest_relを使えばp値を算出できる? p値自体は簡単に求められるけど、取り扱いには注意。ビッグデータを扱う場合は、標本数が多いからp値はやたら低くなりやすい。 p値による検定結果を鵜呑みにせず、目的に応じてその…

25022:
2021-05-01 06:22

AI Insideの株価下落が話題だけど、曲がりなりにもIT業界にお勤めの身からすると、クラウド(苦笑)→ビッグデータ(半笑)→AI(???)な感じ。商材はボヤっとしててなんかすごい感じが出せてればいいんだよねw 少し前に話題にな…

25028:
2021-05-01 05:06

scipyのttest_relを使えばp値を算出できる? p値自体は簡単に求められるけど、取り扱いには注意。ビッグデータを扱う場合は、標本数が多いからp値はやたら低くなりやすい。 p値による検定結果を鵜呑みにせず、目的に応じてその有意差をどう扱うか考…

25027:
2021-05-01 03:59

うんこやちんこは面白けれど、まんこは面白くない という漠然とした感覚は、ニコニコ淫夢の10年以上にわたるデータとして、目に見える形で現れている。 ニコニコ淫夢の表層を攫うだけで「使いにくい下ネタ」が見て取れるので、下ネタを研究するには、この…

25032:
2021-05-01 03:00

【続き】 一文目 ライフタイムバリューを最大化する営業になりたい 根拠 KDDIは株主に以下のように言っています 世の中を取り巻く環境は大きな変革期にあり、5G(第5世代移動通信システム)/IoT、AI・ビッグデータをはじめと…

Recommended

TITLE
CATEGORY
DATE
DX推進に向けたデータ活用で企業が解決するべき課題
IT関連
2021-01-20 03:44
総合食品メーカーの東洋水産、AIソリューションで請求書支払業務の効率化へ
IT関連
2023-01-31 16:05
MITが植物を実験室で植物の組織を培養する方法を開発、最終的には林業や農業の代わりに木材や野菜を生産
バイオテック
2021-01-22 09:43
PostgreSQL 15正式リリース。ソートの改善で最大で400%高速に、SQL標準のMERGEコマンドサポートなど
PostgreSQL
2022-10-17 17:54
Twitter、投げ銭機能「Tip Jar」を開始 数タップでPayPalなどからチップを送金可能
アプリ・Web
2021-05-09 22:10
PostgreSQLのセキュリティや可用性などを企業向けに強化した「Charmed PostgreSQL」、Canonicalが正式リリース
PostgreSQL
2024-07-18 14:41
IvantiのVPN関連製品で2件の脆弱性報告、悪用攻撃も発生
IT関連
2024-01-13 03:22
オープンソース特許コンソーシアムのOIN、特許保護対象をさらに拡大
IT関連
2024-06-15 05:17
DeepSeekの新オープンソースAIモデル、わずかなコストで「o1」同等の性能発揮
IT関連
2025-01-24 23:22
ワークデイ、中規模企業での採用を促進–2022年事業戦略
IT関連
2022-03-18 11:00
オラクル、「Java 22」をリリース–12のテーマを反映
IT関連
2024-03-22 00:14
遠隔操作者なしのレベル4自律飛行ドローンをExyn Technologiesが実現
ドローン
2021-04-29 06:20
専門家に聞く、企業がAIを使いこなすための4つのヒント
IT関連
2023-08-25 09:27
iPhoneのWi-Fi機能にバグ、特定の名前を持つWi-Fiスポットに繋ぐとすべてのWi-Fi機能が無効化(回避策あり)
セキュリティ
2021-06-22 22:05