ビッグデータをリアルタイムに処理する、ストリームデータ処理ツール「GUST(ガスト)」の提供を開始
- 2015年06月02日 09:00:00
- マネー
- Dream News
かもめエンジニアリング株式会社(本社:東京都品川区、代表取締役社長:潮村 剛、以下「かもめエンジニアリング」)は、ビッグデータをリアルタイムに処理する、ストリームデータ処理ツール「GUST(ガスト)」の提供を本日より開始します。
ビッグデータ(※1)の活用がビジネスで不可欠になっていますが、スマートデバイスやIoT(※2)の普及によりデータ量は爆発的に増加しており、「データが大きすぎて保存できない」、「分析に時間がかかる」といった問題が生じています。ストリームデータ処理ツール「GUST」は、ビッグデータをリアルタイムに処理することでこれらの課題を解決します。
■増え続けるデータ量
「ビッグデータ」の活用については成功事例も増加しており、今やビジネスに不可欠なものとなりつつあります。「ビッグデータを活用したい」という企業のニーズは益々高まっています。しかしながら、スマートデバイスやIoTの普及により、データ量は爆発的に増加しており、以下のような問題が顕在化しています。
・データ量が大きすぎて、保存できない。保存するためのストレージが足りない、又は費用がかかりすぎる。
・データ量が大きすぎて、Hadoop(※3)などの分散処理技術を用いても分析できない。時間がかかりすぎる。
・ビッグデータをモニタリングし、特定の条件のデータを抽出したいが、データ量が大きすぎてリアルタイムに処理できない。(例えば不正アクセスの検知など)
■ストリームデータ処理ツール「GUST」の概要
かもめエンジニアリングでは、このような課題を解決するため、ストリームデータ処理ツール「GUST」を開発し、本日より提供を開始します。
ストリームデータ処理ツール「GUST」では、データが発生したタイミングでリアルタイムに、高速にこれを処理します。かもめエンジニアリングの独自の分散処理技術(※4)により秒間数十万件以上の処理性能で、遅延なく大量のデータを処理することが可能です。
ストリームデータ処理ツール「GUST」の詳細は、以下をご参照下さい。
http://kfep.jp/solution/kfepgust
ストリームデータ処理ツール「GUST」は、従来のHadoopを始めとしたビッグデータ関連製品と競合するのではなく、協調して動作します。「GUST」は、主に従来のビッグデータ関連製品の「前処理」として、データの抽出、集約、正規化などを行います。また、リアルタイムにデータのモニタリングを行うことが可能となるため、膨大なデータの中から重要なデータを検知して、リアルタイムに必要なアクションを行うことが可能となります。
■ストリームデータ処理ツール「GUST」の用途
ストリームデータ処理ツール「GUST」の用途としては、以下のようなものが考えられます。
(1) 大量のシステムログや通信ログなどを、Hadoopなどで分析する場合の前処理として、必要なデータのみ抽出、データの集約、データの正規化などを行い、データ量を最適化すると共に分析しやすいフォーマットに整形する。(データ量の圧縮、ストレージの節約、分析処理時間の短縮)
(2) 分析用のデータマートを、蓄積したデータからバッチ処理で行うのではなく、蓄積しながら同時にデータマートを生成する。(従来、翌営業日にしか参照できなかったデータマートが、すぐに見ることができる)
(3) 大量のアクセスログ、行動履歴、システムログなどをリアルタイムに監視し、不審な行動、購買に直結する行動、システム障害の兆候、などを検知した場合に、即座にアクションを実行する。
■ストリームデータ処理ツール「GUST」を選択する理由
・秒間数十万件以上の処理性能
低スペックなマシンでも十分に高性能を発揮する独自のアーキテクチャーで実装されており、1.8GHz程度のミニサーバ10台で秒間約10万件の処理性能を実現しています。現在、大手ベンダーと協力して、100台規模の高集積サーバにおける性能試験を実施中です。
・キャリアグレードの高品質な製品
ストリームデータ処理ツール「GUST」は、かもめエンジニアリングがこれまで多くの大手通信業に提供してきた「高速分散処理技術」、「大量データ処理技術」をベースとして開発されており、様々な業界の中でも難易度が高いと言われている通信業界の要求品質を満たす製品です。
・安心のサポートサービス
これまで、大手通信業の大規模認証基盤などを支えてきた、かもめエンジニアリングのチームが、サポートサービスを提供します。
かもめエンジニアリングは本ソリューションを、ビッグデータを活用している企業などに対して、3年間で10システム以上の導入を見込んでいます。
かもめエンジニアリングは今後も、大手通信業向けの大規模分散処理システムで実績のある「高速分散処理技術」と「大量データ処理技術」を活用し、企業や社会に貢献していきます。
(本プレスリリースに関する連絡先)
かもめエンジニアリング株式会社
(電話)03-6420-3177 担当:徳川 (Web)http://kfep.jp/contact/
(参考)かもめエンジニアリング株式会社について
設立 : 2008年5月1日
代表者 : 代表取締役 潮村 剛
資本金 : 2,000万円
事業内容: コンピュータソフトウェアおよびハードウェアの研究、開発、販売、サポート
所在地 : 東京都品川区上大崎4-5-37
URL : http://kamome-e.com/ (企業ホームページ)
http://kfep.jp/ (ソリューションページ)
主要製品: 分散KVSストレージ 「KFEP(ケイフェップ)」
国内携帯電話キャリアの利用者接続制御や、大手回線ホールセラーの
利用者アクセス制限など、速さと大量処理を必要とする最前線の現場で運用されている。
(※1)ビッグデータ
従来の技術では分析できなかった大量のデータを、分散処理技術などによって分析することで、ビジネスなどに活用すること。またはそのデータ群。
(※2)IoT
Internet of Thingsの略。コンピュータや通信機器だけでなく、世の中に存在する様々なモノに通信機能を持たせて、インターネット等に接続すること。
(※3)Hadoop
ビッグデータを処理するためのソフトウェア。オープンソースとして公開されている。
(※4)かもめエンジニアリングの分散処理技術
かもめエンジニアリングは、KFEPという独自の分散KVSを開発、提供している。特許も取得しており、大手通信業の大規模認証基盤などで多数採用されている。これらの「高速分散処理技術」、「大量データ処理技術」は、ストリームデータ処理ツール「GUST」にも活かされている。
夫婦間のレイプ、刑事罰は「理不尽」 インド・モディ政権が見解
自民離党の世耕氏、衆院選和歌山2区から出馬を正式表明 保守分裂へ
日本人が好む香辛料・スパイス 全国調査で明らかに!飲み物やスイーツでの使用方法も
『ドッグランで遊ぶ犬を見て楽しむ犬…?』まさかの過ごし方がおっさん過ぎると111万再生「人間みたい」「落ち着き具合が可愛すぎるw」と爆笑
能登豪雨、激甚災害に指定へ 首相が初の視察、防災庁設置も推進
ただの犬好きです。【第280話】「やっぱり」
『ごめんて…』寝ている犬の横でくしゃみをしてしまったら…謝罪するしかない光景に6万5000いいね「耳が可愛すぎるw」「悲しそうで草」
【FC東京】鳥栖と勝ち点1分け合う 同点弾MF高宇洋「勝ちきれないのは今の自分たちの弱さ」
【鳥栖】東京に終盤追いつかれ11戦未勝利 木谷公亮監督「全員で前向いてしっかり勝ち点3を」
【浦和】C大阪にセットプレー1発に泣き3連敗…MF原口元気トップ下で先発も3戦連続無得点
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
四千頭身、テレビから消えた理由を明かすも批判殺到「人のせいにするな」
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
「愛が生まれた日」藤谷美和子(56)の現在がヤバい!?徘徊生活を送っていた過去も明らかに。
大御所ものまねタレント息子が救急搬送「今も全く動けません」動画公開 フェス会場でMC務める
二階堂ふみが結婚!?お相手が衝撃的過ぎてネット民「マジか・・・」
【ネタバレ?】史実で見るキングダムの今後の展開まとめ〜中華統一までの全体像
44歳タレントが活動再開へ、17年に吉本芸人と離婚から7年、近影に「顔がどタイプ」絶賛の声
救急搬送の清水良太郎、衝撃の“事故”動画公開に「死亡事故になっていた可能性も」
ダンプ松本(61)の現在が色々と崩壊、衝撃的なブログ内容も
柏原崇(45)現在を調べてみた結果、相変わらずかっこよすぎた!
四千頭身、テレビから消えた理由を明かすも批判殺到「人のせいにするな」
「愛が生まれた日」藤谷美和子(56)の現在がヤバい!?徘徊生活を送っていた過去も明らかに。
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
ダンプ松本(61)の現在が色々と崩壊、衝撃的なブログ内容も
二階堂ふみが結婚!?お相手が衝撃的過ぎてネット民「マジか・・・」
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
ガーシー、橋本環奈と片寄涼太を暴露するも片寄の好感度が上がったワケ
【ネタバレ?】史実で見るキングダムの今後の展開まとめ〜中華統一までの全体像
夫婦間のレイプ、刑事罰は「理不尽」 インド・モディ政権が見解
自民離党の世耕氏、衆院選和歌山2区から出馬を正式表明 保守分裂へ
日本人が好む香辛料・スパイス 全国調査で明らかに!飲み物やスイーツでの使用方法も
『ドッグランで遊ぶ犬を見て楽しむ犬…?』まさかの過ごし方がおっさん過ぎると111万再生「人間みたい」「落ち着き具合が可愛すぎるw」と爆笑
能登豪雨、激甚災害に指定へ 首相が初の視察、防災庁設置も推進
ただの犬好きです。【第280話】「やっぱり」
『ごめんて…』寝ている犬の横でくしゃみをしてしまったら…謝罪するしかない光景に6万5000いいね「耳が可愛すぎるw」「悲しそうで草」
【FC東京】鳥栖と勝ち点1分け合う 同点弾MF高宇洋「勝ちきれないのは今の自分たちの弱さ」
【鳥栖】東京に終盤追いつかれ11戦未勝利 木谷公亮監督「全員で前向いてしっかり勝ち点3を」
【浦和】C大阪にセットプレー1発に泣き3連敗…MF原口元気トップ下で先発も3戦連続無得点