日立、AIを活用し、データ分析・利活用の準備作業を効率化する「Data Preparation Service」を提供開始
- 2019年10月02日 15:00:00
- テクノロジー
- JCN Newswire
本サービスは、社内外から収集した多種多様なデータを解析して、仕様や傾向を把握するデータの理解から、クレンジング*1などの加工方法の検討・検証、実際の前処理の実行まで、従来は人手で膨大な工数を要していたデータの整形・加工作業を高度化するものです。具体的には、お客さまやプロジェクトごとに本サービス専用の環境を用意し、投入されたデータの項目名や欠損値、データ間の関連性などを提案する機能や、データサイエンティストなどの熟練者が有するデータ加工方法のノウハウを登録・共有できる機能などを提供します。
本サービスにより、熟練者が有するプログラミングや統計などの高度なスキルやノウハウがなくても、高品質かつ効率的なデータの前処理を行うことが可能となります。前処理の作業負荷を軽減することで、本来時間と工数をかけるべき分析作業に集中することが可能となり、お客さまのデータ利活用の促進とデジタルトランスフォーメーションを支援します。
近年、業務データのみならず機器やセンサーから得られたIoTデータなど異種混合なデータをビジネスに活用するニーズが高まっています。しかしながら、現場で生成されるデータには項目の定義情報がないことや同種のデータがシステムごとに異なる名称で管理されることも多いため、実際に分析や利活用を行う際はデータの仕様把握や形式統一、類似データの統合*2などの前処理が不可欠です。
こうしたデータ前処理の作業は、データサイエンティストなどが業務有識者にヒアリングを行い、クレンジングや統合などの検証を繰り返し行う必要があるため、分析作業全体の8割の工数を占めるとも言われています。さらに、データ統合のミスが分析結果に影響し、失敗につながるケースも多いため、作業の専門性や属人性に加え精度面も課題とされています。
日立は、Lumada*3事業を展開し、データから新たな価値を創出する多様なソリューションを提供しています。そこで培ってきたノウハウを活用し、今回、「Data Preparation Service」を開発しました。
データ前処理は、一般的に、データの仕様を特定する「データ理解」と、仕様に基づいてクレンジングや統合を試行する「データ加工の検討・検証」のプロセスを繰り返し、データの品質を高めていく作業です。本サービスでは、データの項目や欠損値、データ間の関連性など、データの理解に必要となるさまざまな情報を解析し、直感的かつグラフィカルに提示します。
また、加工方法(前処理ロジック*4)を登録・共有する機能を備え、欠損値の補完や異常値・重複データの排除といった専門性の高い加工作業を手軽に検証できるほか、ETLツール*5との連携機能により、検証済みの前処理ロジックをETL上で個別に実装することが不要となるため、リアルタイムに発生するデータの前処理を効率的に定常運用*6へ移行することが可能です。
本サービスにより、多種多様なデータの整形や加工作業の効率化を支援し、高品質なデータをデータレイク*7に格納できます。これにより、さまざまなデータ分析をはじめ、AIに投入するデータや、IoTシステムへの入力データ、業務システムへの入力データの整備など、幅広い用途でデータの利活用を促進します。
今後、Lumadaを用いたデジタルトランスフォーメーションを迅速かつ容易にする「Lumada Solution Hub*8」との連携を図るなど本サービスを強化し、お客さまやパートナーとの協創やデータ利活用のさらなる促進と新たなビジネス価値創出に貢献していきます。
本リリースの詳細は下記URLをご参照ください。
https://www.hitachi.co.jp/New/cnews/month/2019/10/1002.html
概要:日立製作所
詳細は www.hitachi.co.jp をご参照ください。
Copyright 2019 JCN Newswire. All rights reserved. www.jcnnewswire.com
日本生命のリードオフマン松本渉が三盗含む3盗塁「次の塁に行くのが僕の役目」50m5・7秒
宇野実彩子、沖縄旅行写真が大反響「全部可愛い」「旦那さんも一緒ですかー?」夫はNEWS小山
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
【巨人】今季4度目引き分け「ピッチャーは責められません。チャンスで打てないだけで」阿部監督
ドイツ代表MFトニ・クロースが引退へ「ピークでキャリア終える」34歳、インスタで表明
【楽天】23安打21失点「福岡の悲劇」 20失点以上は05年3月27日ロッテ戦以来2度目
森山愛子、20周年の節目に年内での活動休止を発表「自分自身と向き合い見つめ直したい」
“カズ談”で夢プラン明かす「115歳2トップ」元ブラジル代表ロマーリオの現役復帰で本気顔
平野紫耀の弟・莉玖「生粋のコショラー」と明かし、使用量に驚きの声「横でくしゃみするくらい」
【データ】ソフトバンク今季12球団最多21得点 球団最多は03年ダイエー時代の29得点
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
TikTokを賑わす「フエラムネごめんなサイダー味」がセブンイレブンで再販!じゅるるマスカットも買うなら今!
大谷翔平が不運な判定で2度見逃し三振 「えん罪退場」で話題の球審は引き揚げる大谷にブチギレ
吉野家が「マスク外し強要疑惑」でプチ炎上、店員さんに聞いてみると……
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
マンション刺殺、被害者は19歳大学生の女性 大阪・枚方
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
藤田ニコル「脱ぐ予定なかったのですが気づいたらノリノリで…」ヒョウ柄水着姿に大反響
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
TikTokを賑わす「フエラムネごめんなサイダー味」がセブンイレブンで再販!じゅるるマスカットも買うなら今!
大谷翔平が不運な判定で2度見逃し三振 「えん罪退場」で話題の球審は引き揚げる大谷にブチギレ
日本生命のリードオフマン松本渉が三盗含む3盗塁「次の塁に行くのが僕の役目」50m5・7秒
宇野実彩子、沖縄旅行写真が大反響「全部可愛い」「旦那さんも一緒ですかー?」夫はNEWS小山
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
【巨人】今季4度目引き分け「ピッチャーは責められません。チャンスで打てないだけで」阿部監督
ドイツ代表MFトニ・クロースが引退へ「ピークでキャリア終える」34歳、インスタで表明
【楽天】23安打21失点「福岡の悲劇」 20失点以上は05年3月27日ロッテ戦以来2度目
森山愛子、20周年の節目に年内での活動休止を発表「自分自身と向き合い見つめ直したい」
“カズ談”で夢プラン明かす「115歳2トップ」元ブラジル代表ロマーリオの現役復帰で本気顔
平野紫耀の弟・莉玖「生粋のコショラー」と明かし、使用量に驚きの声「横でくしゃみするくらい」
【データ】ソフトバンク今季12球団最多21得点 球団最多は03年ダイエー時代の29得点