第5回:クラウドで失敗しないためのデータ仮想化
今回は「第5回:クラウドで失敗しないためのデータ仮想化」についてご紹介します。
関連ワード (データ統合の新潮流「データ仮想化」とは、ビッグデータ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。
本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。
かつてない速さで成長しているクラウドコンピューティング技術は、ほとんどの企業にとって不可欠なものとなり、後はいつ導入するかの問題になっています。クラウドアプリケーションを使えば、情報の可視化や共有をリアルタイムに行うことも簡単です。クラウドベースのサービスならば、需要の増減に合わせて処理能力を柔軟に拡大縮小できます。クラウドコンピューティングによりハードウェアへの投資を削減できるため、大きなコスト抑制にもなります。
一方で、クラウドコンピューティングの全面的な採用を妨げるさまざまな課題もあります。セキュリティや運用管理、パフォーマンスをはじめ、複数のクラウドを管理する手間やベンダーロックインの問題に至るまで、企業が慎重になる理由には事欠きません。往々にして詳細な事前調査が足がかりとなります。データソースが多種にわたり、地理的に分散している場合、データの移動と複製を最小限にして時間とコストを節約することが、よりいっそう重要になります。
Gartnerの調査によると、パブリッククラウドを使用している組織の81%が複数のクラウドプロバイダーを利用しています。大部分の企業において、ハイブリッドクラウドというアーキテクチャーが最も一般的なデプロイ方法となっています。クラウドの採用が進んでいる組織では、各クラウドプロバイダーの能力が生きるようにワークロードを振り分けたいため、マルチクラウドのデプロイが選択されます。
マルチクラウドやハイブリッドクラウドへの移行が増えているため、異種クラウドシステムのデータ統合のニーズも増えています。クラウドデータ統合を利用すれば、複数アプリケーション間(パブリッククラウド、プライベートクラウド、オンプレミス)でのデータの同期と共有を、一貫性を持って行うことができます。
しかし、クラウドデータ統合のプロジェクト自体にも課題があります。多くの場合、クラウドシステムはスケーラビリティーやパフォーマンスに重点を置いて設計されており、データ統合については意識されません。このため、クラウドシステムと外部システムのデータを同期することは、たいへん難しい課題となります。
また、クラウドのアプリケーションで取り扱うデータ形式にも複数の選択肢があります。多くの調査によると、利用されているデータの約3分の2がいまだに構造化データであり、多くの非構造化データは完全には利用されていません。ETL(抽出、変換、格納)のような従来のデータ統合技術は、非構造化データにはあまり役に立ちません。
真に必要なのは、アジリティー、リアルタイム性、コスト効率の優れたデータ統合プラットフォームを使用する包括的なクラウド戦略です。最新のデータ統合技術であるデータ仮想化は、オンプレミスとクラウドシステム、複数ベンダーのクラウドにわたるマルチロケーションアーキテクチャーに対応し、それぞれにワークロードが分散していても構いません。
最新のデータ仮想化プラットフォームは、ハイブリッドクラウドのデータを統合するのに適した手段を、高度な分析とデータサイエンスに適した、検索可能で業務にすぐ利用できるセマンティックレイヤーで提供しています。最新のデータ仮想化プラットフォームが役立つクラウドのユースケースには、次のようなものがあります。
Prologisは1983年に創業され、効率的な物流不動産ソリューションをグローバルに提供しています。19カ国で1600人の従業員を抱え、1110億ドル以上の資産(19カ国で7億9700万平方フィート以上)を管理しています。
同社は、さまざまな不動産を世界中で管理しているため、膨大な量のデータがさまざまな言語で生成され、地理的に分散したさまざまなソースに保存されています。業務を効果的に行うために、この膨大な量のデータを日々統合する必要があります。
Prologisは長年にわたり、データベース群、統合サーバー、レポートサーバーが稼動する27台のサーバーから構成されるグローバルなオンプレミスのデータウェアハウスを使用して、データを管理してきました。変更されたデータは専用システムでソースシステムから取得し、データウェアハウスに送信していました。ソースデータをデータウェアハウスに移動するためには、主にETL用のサーバー群を使っていました。
同社は、データインフラストラクチャーのモダナイゼーションを行ってクラウド機能を取り込むだけでなく、効率化によりデータ分析を推進しようと考えていました。しかし、既存システムの中断により過度のダウンタイムを発生させるモダナイゼーションに取り組むつもりはありませんでした。
そこでPrologisは、クラウドベースのデータウェアハウス「Snowflake」を既存のオンプレミスのデータウェアハウスに併設しました。また、データインフラストラクチャーのさらなる強化のために、データ仮想化を使用する「Denodo Platform」を導入しました。
これにより、種類の異なる無数のデータソースから新規の統合リポジトリーにデータを複製することなく、リアルタイムにデータが統合されます。Denodo Platformは、データソースとデータコンシューマーとの間のインテリジェントなデータアクセスレイヤーとなって、アクセスの複雑さからデータコンシューマーを切り離します。これによって、オンプレミス、クラウド、その他のソースにわたってデータへのリアルタイムアクセスを実現する、論理データウェアハウスのアーキテクチャーを確立しました。
Prologisは、Denodo PlatformがSnowflakeへのスムーズな移行を容易にしたことを高く評価しています。また、移行を完了して論理データウェアハウス構成を実現すると、クラウドでの分析を推進するDenodo Platformの能力を高く評価するようになりました。
拝見、隣の"すご腕"データ活用――先進企業はどうしているのかを語り合った:機敏で使いやすくコスト効率の良い ...
データをビジネスに活用する機運が高まっているが、データ分析の実現にはさまざまな課題と向き合う必要がある。これらを解決し、データの活用を推進するためには何から始めればいいのだろうか。複数の観点から語り合った。
革新的なSASハッカソンの優勝者、AIとアナリティクスを通じて社会課題を解決 - SankeiBiz(サンケイビズ ...
消防士の安全確保から肥料リサイクルの探求まで、優勝者はデータを意思決定に変換SAS初のグローバル・ハッカソンの優勝者が、ビッグデータAIを使用して困難な問題の解…
中国の主要なビッグデータ博覧会がオンライン展示を5月20日に開始 | プレスリリース | 沖縄タイムス+プラス
中国国際ビッグデータ産業博覧会組織委員会によると、専門的な展示がオンライン、オフラインの双方で行われ、オンラインによる展示は5月20日に始まる予定。 オンライン展示会は、登録開始以来、国内外の多数のビッグデータ企業を引きつけている。
月例新築マンション動向発表~東京都下の供給戸数が22.6%増(2021年2月度分譲実績)|2021年5月号:時事ドットコム
[株式会社マーキュリー]新築マンションのビッグデータを活用し、不動産マーケティングプラットフォーム事業を行う株式会社マーキュリー(本社:東京都新宿区 代表取締役:陣 隆浩)は、Realnetニュース(https://news.real-net.jp/)にて独自調査による新築分譲マンションの最新動向を発表致します。今月は、2021年2月度分譲実績データです。集計対象エリアは首都圏及び関西圏となっており、それぞれのエリア別相場情報、需給動向、着工件数等を集計しました。また、前年同月における比較や市区…
月例新築マンション動向発表東京都下の供給戸数が22.6%増(2021年2月度分譲実績)2021年5月号(2021年5 ...
新築マンションのビッグデータを活用し、不動産マーケティングプラットフォーム事業を行う株式会社マーキュリー(本社:東京都新宿区代表取締役:陣隆浩)は、Realne…(2021年5月17日 13時16分48秒)
データベースマーケティングとは?Crmとの違い、活用事例を紹介 - Tosho Digital
データベースマーケティングは、ビッグデータの解析技術やソフトウェアの進化にともなって発展しています。マーケティング担当者がインプットしておきたい基礎知識を解説します。
革新的なsasハッカソンの優勝者、Aiとアナリティクスを通じて社会課題を解決:北海道新聞 どうしん電子版
消防士の安全確保から肥料リサイクルの探求まで、優勝者はデータを意思決定に変換SAS初のグローバル・ハッカソンの優勝者が、ビッグデータAIを使用して困難な問題の解決策を提供しました。世界中から集ま...
【研究成果】医療ビッグデータを用いて、抗てんかん薬の併用パターンと重篤な皮膚障害の関連性を明らかに!!|岐阜薬科大学
本研究では、独立行政法人医薬品医療機器総合機構( PMDA )が公開している医療ビッグデータである Japanese Adverse Drug Event Report database をもとに安全性シグナル検出手法(図1、図2)を用いて、重篤な皮膚障害と関連する抗てんかん薬の併用パターンを明らか ...
生体信号ビッグデータから日本人の睡眠実態を客観的に評価|大阪大学 | アンドラ
大阪大学大学院基礎工学研究科、 東京大学大学院教育学研究科、 名古屋市立大学大学院医学研究科 研究グループは、10歳から89歳の 約7万人の生体信号ビッグデータを解析。 この生体信号ビッグデータとは、 日本全国から集められた対象者が装着した 24時間ホルター心電図計記録に 付随する身体加速度データから、 機械学習を援用し睡眠を特徴づける 睡眠指標(総睡眠時間、睡眠効率、 睡眠潜時、中途覚醒時間など)を 導出したデータです。 データを解析することで、加齢や性差により 睡眠の量や質にどのような違いが生じるのかを 客観的に評価して、日本居住者の 睡眠実態を明らかにしたそうです。 年齢による睡眠の変化
革新的なSASハッカソンの優勝者、AIとアナリティクスを通じて社会課題を解決:紀伊民報AGARA
消防士の安全確保から肥料リサイクルの探求まで、優勝者はデータを意思決定に変換sas初のグローバル・ハッカソンの優勝者が、ビッグデータaiを使用して困難な問題の解決策を提供しました。世界中から集まったチ...
月例新築マンション動向発表~東京都下の供給戸数が22.6%増(2021年2月度分譲実績)|2021年5月号 - Pr ...
新築マンションのビッグデータを活用し、不動産マーケティングプラットフォーム事業を行う株式会社マーキュリー(本社:東京都新宿区 代表取締役:陣 隆浩)は、Realnetニュース(https://news.real-net.jp/)にて独自調査による新築分譲マンションの最新動向を発表致します。今月は、
堺市がbodik Odcsに参加 - Bodik | ビッグデータ&オープンデータ・イニシアティブ九州
ビッグデータ&オープンデータ・イニシアティブ九州 〒814-0001; 福岡市早良区百道浜2-1-22-5f; 公益財団法人九州先端科学技術研究所
iPhone Pro、iPad proで、誰でもカンタンに高精度3次元測量を実現!「OPTiM Geo Scan ...
iPhone Pro、iPad Proで、誰でもカンタンに高精度3次元測量を実現!「OPTiM Geo Scan」発売 オプティム
Itrが『移りゆくデータ活用基盤のトレンド』を発行――企業のデータ活用の課題と踏むべきステップを解説 ...
独立系ITコンサルティング・調査会社であるアイ・ティ・アールは、ビッグデータ/AIの本格活用を目指す企業の情報システム部門に向けて、データ活用基盤の観点から企業が抱えている課題とデータ活用高度化のためのステップを解説したホワイトペーパー『移りゆくデータ活用基盤のトレンド ~クラウド・シフトの進展とAIサービスの台頭~』を発行し、6月5日から同社のWebサイトで公開するとともに、その概要を発表した。
緊急事態宣言中の電話対応休止のお知らせ | ブレインパッド
ブレインパッドは、データを活用して会社を変革したい企業様を支援する、2004年創業のリーディングカンパニーです
「予算3000万、3年で売り上げ10億」そんなムチャ振りに応えるDX:日経クロストレンド
前回の記事では、DX(デジタルトランスフォーメーション)がうまく進まない企業の共通点について説明した。では、DXを進めづらい傾向がある規模の大きな企業などでは、どうデジタル化を進めるのか。多数の事業開発の経験を持つコンサルタント、岡村直人氏がその処方箋を解説する。
JCB消費NOW
「JCB消費NOW」は、日本発唯一の国際カードブランド運営会社であるJCBと 最先端のビックデータ解析ノウハウを持つナウキャストが開発する、インターネットショッピングやサービス産業での売上動向を含めた消費活動の“今”を知るための新しい指標です。
【オークス予想】Aiが指名した本命候補は超人気薄! ソダシとの組み合わせでも妙味あり/Jra重賞レース展望 | 競馬 ...
今週末は3歳牝馬頂点を決める一戦、芝2400m戦オークス。今週もオリジナルのビッグデータを活用したai競馬予想から弾き出した、オークスの激走 ...
【マンガでわかる】2020年ノーベル物理学賞、ロジャー・ペンローズの「ペンローズ・タイル」は、ここがすごい ...
天才数学者たちの知性の煌めき、絵画や音楽などの背景にある芸術性、AIやビッグデータを支える有用性…。とても美しくて、あまりにも深遠で、ものすごく役に立つ学問である数学の魅力を、身近な話題を導入に、語りかけるような文章、丁寧な説明で解き明かす数学エッセイ『とてつもない数学』が発刊。発売4日で1万部の大重版、その後も重版が続きロングセラーとなっている。「数学“零点”を取った私のトラウマを払拭してくれた」鎌田浩毅氏(京都大学教授)、教育系YouTuberヨビノリたくみ氏「色々な角度から『数学の美しさ』を実感できる一冊!!」と各氏から絶賛されたその内容の一部を紹介します。
[社説]個人情報の保護体制を適正に: 日本経済新聞
デジタル庁の新設と一体の形で、個人情報保護法が全面改正された。自分にかかわるデータが悪用されるかもしれないと国民が不安を抱いていると、デジタル立国はなかなか加速しない。守るべき個人情報は適正に保護し、安心してビッグデータ活用が進む社会にしたい。個人情報の保護は先進的な自治体で始まった。徳島市が1973年、東京都国立市が75年に関係条例を制定したのが先駆けである。国は2003年にようやく個人情報
ASCII.jp:DXコンサルティングを手がけるFabeee、AI領域での新サービスを拡大すべく新規事業開発推進室を ...
DXコンサルティングを手がけるFabeee、AI領域での新サービスを拡大すべく新規事業開発推進室を設立。ABEJA元取締役 長谷直達氏がアドバイザーに就任
【Linux/SQL】ビッグデータ使用システムのデータ処理|派遣の求人検索サイト ジョブチェキ!
【Linux/SQL】ビッグデータ使用システムのデータ処理の詳細ページです。テンプスタッフの求人検索サイト ジョブチェキ!では、希望の条件にあった仕事を検索できます。派遣から紹介予定派遣・正社員まで様々なニーズにお応えします。
AIを効果的に利用した2つの成功事例:AIの価値【後編】 - TechTargetジャパン データ分析
AI導入の最も重要なポイントは「AIでなければできない」ことにAIを使うことだ。「AI導入」が目的ではなく手段であることを見失わなかった2つの事例を紹介する。
防犯カメラの活用は既に始まっている ㊦ - 経済記者山田くん
防犯カメラ映像の活用は、データ容量の重い映像ファイルを如何に軽くするか。ここに掛かっていた。これを解決したの東京のスタートアップIT企業。「この防犯カメラの映像をビックデータとして活用すれば、いろんな課題の解決につながります」「ただ、動画はデータの容量が大きく、これらの動画を保存し活用するには課題が残されていたのです。こうしたなかでベンチャー企業が、重い動画ファイルを軽くする特殊技術を開発し事業化しているのです」この部分の報告を聞いて、画像処理技術は、もうそこまで来ているのだと知った。そして今では防犯カメラは、個々の住宅や街角など気付かないところにまで設置される場所が増えている。ドライブレコーダーもネットにつなげればビッグデータとして活用できるだろう。中国政府はすでに、国民一人ひとりを管理している。日本が中国の...防犯カメラの活用は既に始まっている㊦
ポジティブ?ネガティブ?ツイートの感情分析にbertを活用した事例紹介 〜 学習データのラベル偏りに対する取り組み ...
Yahoo!リアルタイム検索の一機能である感情分析機能と、そのシステム刷新作業の一環として行ったラベル偏り改善の取り組みをご紹介します。
プロゴルファー大里桃子選手「2021年 ほけんの窓口レディース」で優勝 | 株式会社オープンストリーム
オープンストリームは、クラウド、ビッグデータ、AI、IoTなど最先端の戦略技術を駆使した情報システムやサービスの開発と、導入企業2000社を超えるビジネスUIプラットフォーム「Biz/Browser」の開発・販売をしています。
【調査リリース】コロナ影響下での結婚式実施動向を調査 緊急事態宣言後に復調傾向も規模・予算縮小 | ビッグデータ× ...
◆式場選びは“情報誌・ネットで十分絞り込み⇒会場見学”の流れに変化 ◆コロナ影響で実施規模を縮小、二次会も自粛へ ◆平均予算はコロナ前後で90万円近く減少 インターネット行動ログ分析によるマーケティング調査・コンサルティン…
Cookieレス時代のネット広告を考える~利用者保護とマーケティング成果を両立するために一覧:MarkeZine ...
翔泳社が運営するマーケター向け専門メディア。MarkeZineはデジタルを中心とした広告・マーケティングに関する情報を多角的な視点で毎日提供します。
株式会社CINCがSEOオンラインセミナーを5月18日より開催:時事ドットコム
[株式会社CINC]株式会社CINC(シンク、以下CINC)は、2021年5月18日(火)から5月26日(水)にかけて、初めて自社のSEO担当者になった方や、改めてSEOについて学びたい方を対象に、2つのテーマのウェビナーを連載方式で開催いたします。CINCはビッグデータ解析を用いたデジタルマーケティングのコンサルティングサービスを提供しています。日頃からクライアントのWebサイトに適切な指針、施策を提案するべく、検索結果の動向を研究しており、それらの見解をまとめ、毎月オンラインセミナーを開催し…
【Web・自動化・スクレイピング編/全国参加可】現役エンジニア講師!Pythonオンラインセミナー - connpass
## イベント概要 近年、AI/IoT/ビッグデータなど政府が掲げる「第4次産業革命」領域において世界各国が技術革新を進めています。 しかし、日本の人材リソースの面においては大きな課題を抱えており、 大きく市場拡大が予想されるデータ活用人材は、2030年で約59万人不足することが予想されています。 そこで、これからPythonエンジニアを目指す方向けにPythonの需要と今後について、ウェビナー形式で開催いたします。 市場価値の高いPythonエンジニアへのキャリアを目指したい方、ぜひ本セミナーへご参加くださいませ。 ※本セミナーはZoomにてオンライン開催いたします。事前に...
第5回:クラウドで失敗しないためのデータ仮想化 - ZDNet Japan
今回は、データ仮想化技術を用いることで、既にデータレイク、データウェアハウス(DWH)、マスターデータ管理(MDM)システムが導入されているエンタープライズアーキテクチャーに、どのように付加価値が加わるのかを解説する。