日立、AIを活用し、データ分析・利活用の準備作業を効率化する「Data Preparation Service」を提供開始
- 2019年10月02日 15:00:00
- テクノロジー
- JCN Newswire
本サービスは、社内外から収集した多種多様なデータを解析して、仕様や傾向を把握するデータの理解から、クレンジング*1などの加工方法の検討・検証、実際の前処理の実行まで、従来は人手で膨大な工数を要していたデータの整形・加工作業を高度化するものです。具体的には、お客さまやプロジェクトごとに本サービス専用の環境を用意し、投入されたデータの項目名や欠損値、データ間の関連性などを提案する機能や、データサイエンティストなどの熟練者が有するデータ加工方法のノウハウを登録・共有できる機能などを提供します。
本サービスにより、熟練者が有するプログラミングや統計などの高度なスキルやノウハウがなくても、高品質かつ効率的なデータの前処理を行うことが可能となります。前処理の作業負荷を軽減することで、本来時間と工数をかけるべき分析作業に集中することが可能となり、お客さまのデータ利活用の促進とデジタルトランスフォーメーションを支援します。
近年、業務データのみならず機器やセンサーから得られたIoTデータなど異種混合なデータをビジネスに活用するニーズが高まっています。しかしながら、現場で生成されるデータには項目の定義情報がないことや同種のデータがシステムごとに異なる名称で管理されることも多いため、実際に分析や利活用を行う際はデータの仕様把握や形式統一、類似データの統合*2などの前処理が不可欠です。
こうしたデータ前処理の作業は、データサイエンティストなどが業務有識者にヒアリングを行い、クレンジングや統合などの検証を繰り返し行う必要があるため、分析作業全体の8割の工数を占めるとも言われています。さらに、データ統合のミスが分析結果に影響し、失敗につながるケースも多いため、作業の専門性や属人性に加え精度面も課題とされています。
日立は、Lumada*3事業を展開し、データから新たな価値を創出する多様なソリューションを提供しています。そこで培ってきたノウハウを活用し、今回、「Data Preparation Service」を開発しました。
データ前処理は、一般的に、データの仕様を特定する「データ理解」と、仕様に基づいてクレンジングや統合を試行する「データ加工の検討・検証」のプロセスを繰り返し、データの品質を高めていく作業です。本サービスでは、データの項目や欠損値、データ間の関連性など、データの理解に必要となるさまざまな情報を解析し、直感的かつグラフィカルに提示します。
また、加工方法(前処理ロジック*4)を登録・共有する機能を備え、欠損値の補完や異常値・重複データの排除といった専門性の高い加工作業を手軽に検証できるほか、ETLツール*5との連携機能により、検証済みの前処理ロジックをETL上で個別に実装することが不要となるため、リアルタイムに発生するデータの前処理を効率的に定常運用*6へ移行することが可能です。
本サービスにより、多種多様なデータの整形や加工作業の効率化を支援し、高品質なデータをデータレイク*7に格納できます。これにより、さまざまなデータ分析をはじめ、AIに投入するデータや、IoTシステムへの入力データ、業務システムへの入力データの整備など、幅広い用途でデータの利活用を促進します。
今後、Lumadaを用いたデジタルトランスフォーメーションを迅速かつ容易にする「Lumada Solution Hub*8」との連携を図るなど本サービスを強化し、お客さまやパートナーとの協創やデータ利活用のさらなる促進と新たなビジネス価値創出に貢献していきます。
本リリースの詳細は下記URLをご参照ください。
https://www.hitachi.co.jp/New/cnews/month/2019/10/1002.html
概要:日立製作所
詳細は www.hitachi.co.jp をご参照ください。
Copyright 2019 JCN Newswire. All rights reserved. www.jcnnewswire.com
アグネス・チャン「賭博に手を染めたマネージャー」による盗難被害を告白し私見、水原一平氏問題
「この段階で女性が特定できていないのは準備がお粗末なんじゃ…」国際弁護士、松本人志裁判に私見
ひろゆき氏「大谷翔平・水原氏の信頼関係は崩れてない」違法賭博の巨額送金で私見、その根拠とは
奈良の中学生、企業30社の心動かす 「シリアの同世代支援」実現へ
「いつ死んでもいいと思っていた」 福祉専門官が変えた受刑者の意識
木村沙織「GOGO DOG検定プードル部門」合格を報告「初めて知ることもたくさん」
小野伸二氏、実は10人きょうだい「寝る時は足の踏み場もない」意外な名前の由来も明かす
刑期を忘れた高齢受刑者も 広島の刑務支所、出所後見据え特別訓練
森日菜美 新ランジェリーショットは淡いオレンジ色「大人っぽくなった私を見てもらえる」
茂木健一郎氏、松本人志「お笑いがしたい」に私見「『甘えてんじゃねぇよ』っていう気持ちも」
クロちゃんを騙した「レイちゃま(小林レイミ)」の現在が別人すぎると話題に
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
大谷翔平の口座に「勝手に」アクセスした水原一平氏の手口に「思い当たる節ある」二宮清純氏告白
なぜ水原一平氏が送金できたのか? の疑問に財務省OB高橋洋一氏「難しくない。できるよ」
性被害告白の元女優「女性としての喜びは断たれてしまい」「気持ちがいいと感じたこともない」
壇蜜、事務所破産報道めぐる直撃に「どうしよう、という思い」 2~3週間前に聞き「ショック」
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
小林製薬が紅麹供給の173社を公表 厚労省「被害の有無報告を」
壇蜜、所属事務所の破産手続き報道にショック「なくなるんだよと聞きました。どうしよう、と」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
クロちゃんを騙した「レイちゃま(小林レイミ)」の現在が別人すぎると話題に
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
ゲス不倫で干されたベッキー(35)現在の姿がとんでもないことになっていると話題に
ツチヤカレン、7月5日にメジャー2ndシングル『メーデー』リリース&TikTok Live配信決定!
城田優(35)三浦春馬ファンから誹謗中傷、酷すぎると話題に
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
日めくりカレンダー 『音楽家の名言~あなたの演奏を変えるメッセージ~』 『クラシックの作曲家』 6月27日 同時発売!
アグネス・チャン「賭博に手を染めたマネージャー」による盗難被害を告白し私見、水原一平氏問題
「この段階で女性が特定できていないのは準備がお粗末なんじゃ…」国際弁護士、松本人志裁判に私見
ひろゆき氏「大谷翔平・水原氏の信頼関係は崩れてない」違法賭博の巨額送金で私見、その根拠とは
奈良の中学生、企業30社の心動かす 「シリアの同世代支援」実現へ
「いつ死んでもいいと思っていた」 福祉専門官が変えた受刑者の意識
小野伸二氏、実は10人きょうだい「寝る時は足の踏み場もない」意外な名前の由来も明かす
木村沙織「GOGO DOG検定プードル部門」合格を報告「初めて知ることもたくさん」
刑期を忘れた高齢受刑者も 広島の刑務支所、出所後見据え特別訓練
森日菜美 新ランジェリーショットは淡いオレンジ色「大人っぽくなった私を見てもらえる」
テレ朝・森山みなみアナ涙「羽鳥モーニング」卒業であいさつ「最後まで未熟な私だったんですが」