オムロン サイニックエックス、京大、東工大、奈良先端大と、ロボット制御に関する共同研究開始
オムロン サイニックエックス、 ロボット制御に関する共同研究プロジェクトを 京都大学・東京工業大学・奈良先端科学技術大学院大学と開始 ~画像認識と自然言語*1処理を組み合わせた言語指示で ロボットの多様な作業の実現を目指す~
オムロン サイニックエックス(本社所在地:東京都文京区、代表取締役社長:諏訪正樹、以下、OSX)は、京都大学(所在地:京都府京都市左京区、総長:湊長博)、東京工業大学(所在地:東京都目黒区、学長:益一哉)、奈良先端科学技術大学院大学(所在地:奈良県生駒市、学長:塩﨑一裕)と共同で、自然言語指示によるロボット制御によって、ロボットの多様な作業を可能にする研究プロジェクトを開始しました。本プロジェクトでは、言葉による指示によってロボットが作業に必要な動作の一覧を生成するアルゴリズム開発と、生成された動作を人と身体性*2が異なるロボットの動作に自動で変換しロボットを制御する技術の構築を目指します。
本研究を通じて、OSXは人と機械が対話し、パートナーのような関係性を築くことで、人がより創造的な活動をおこなうことができる「人と機械が融和」した世界の実現を目指します。
*1)自然言語とは、私たち人間が日常書いたり話したりしている日本語や英語のような、自然な言語のことを表します。
*2)身体性とは、体の動き方や可動性を表します。
近年、さまざまな業種・業態において労働力不足が社会的課題となっており、ロボットを使って人の作業を代替する取り組みが盛んに行われています。こうした中、人からの言葉の指示によってロボットに作業を代替させる技術は、ロボット制御に関する専門知識を必要とせず、ユーザーが話しかけるだけでロボットに作業の内容を伝えることができる技術として期待が高まっています。他方、現在実現されているシステムの多くは、箱の中から指示した物を掴み移動させるといった特定のシーンにおけるロボット制御にとどまっています。様々なシーンでロボットに作業を代替させるためには、作業の目的からそれに必要となる動作の一覧を生成でき、それに基づいてロボットを簡単に制御できるアルゴリズムが必要です。
これらの課題に対して、人からの自然言語指示で様々なシーンにおいてロボットを制御するアルゴリズムの研究開発を、OSXと京都大学、東京工業大学、奈良先端科学技術大学院大学による共同研究プロジェクトとして取り組みます。
【画像:https://kyodonewsprwire.jp/img/202111103166-O2-oDcA3bT3】
自然言語指示によるロボット制御研究の多くは、「モノを掴む」や「部屋を移動する」といった単純な動作にとどまっています。そこで、本プロジェクトでは、作業工程の写真や、実際に人間が作業している動画をもとに、機械学習によって自然言語指示と動作環境の情報から、「初期状態」を「指示内容を実行した後の状態」にするという動作の“意図”を形成し、作業に必要となる動作を生成するアルゴリズム開発を行います。
また、生成された動作は学習データとしている人の動作に基づいているため、ロボットでその動作を実現するためには、人とロボットの身体性の違いを考慮し、ロボットに合わせた制御方法を実現する必要があります。そこで、本プロジェクトでは、人とロボットの身体性の違いによる影響を解決するために、「道具の使い方」に着目します。「道具の使い方」は人もロボットも同じはずという前提のもと、人が行う複数の作業動画における道具を使っているシーンから学習し、例えばニンジンの皮を剥く際のニンジンへのピーラーの当て方といった、道具の使い方や力加減を真似することでロボットアームの動作モデルの生成を目指します。
これらの研究を進めることで、人がロボットに言葉で指示をするだけでロボットが自動的に取るべき動作を理解し、道具を使いながら作業を遂行できるようになり、ロボットの社会的意義をこれまで以上に高められる可能性があります。さらにこれらの機能の社会実装を通じて新たな課題発見への期待も見込まれます。
OSXでは、今後も積極的に社内外との共創を進め、研究を通じて新たなイノベーションを創造し、よりよい社会づくりに貢献していきます。
■取組期間
2021年度から2023年度までの3年間
※本共同研究プロジェクトは、日本学術振興会による令和3(2021)年度の科学研究費助成事業 基盤研究(A) 21H04910の支援を受けて遂行します。
■各機関の役割
オムロン サイニックエックス:研究プロジェクトの代表者(研究統括)
各機関における研究成果に基づく統合的なシステム開発の主担当
画像や触覚に基づいたロボット制御信号の生成の主担当
各共同研究機関が主として担当する課題の副担当
京都大学大学院情報学研究科
言語指示からの、実行すべき動作系列の生成の主担当
東京工業大学 情報理工学院 情報工学系
画像や触覚に基づいた動作記述を獲得する研究・開発の主担当
奈良先端科学技術大学院大学 先端科学技術研究科 情報科学領域
動作系列を入力としたロボット制御信号の生成に関する研究・開発の主担当
オムロン サイニックエックス株式会社について
オムロン サイニックエックス株式会社は、オムロンの考える"近未来デザイン"を創出する戦略拠点です。「AI」「ロボティクス」「IoT」「センシング」など、幅広い領域の最先端技術のトップ人財が研究員として在籍し、社会的課題を解決するために、技術革新をベースに「ビジネスモデル」「技術戦略」「知財戦略」を統合し具体的な事業アーキテクチャに落とし込んだ"近未来デザイン"を創り出します。また、大学や社外研究機関との共同研究を通じて「近未来デザイン」の創出を加速していきます。詳細については、https://www.omron.com/sinicx/をご参照ください。
本件に関するお問い合わせ先
オムロン株式会社 イノベーション推進本部
エンゲージメント・コミュニケーション部
TEL: 0774-74-2010
一世風靡した元ギャル38歳タレントが桃色ロングヘアで生放送登場、長男はもう16歳高1
逮捕の「つばさの党」代表、2017年衆院選山口4区でも演説妨害
44歳女性お笑いタレントの近影に「目元が夏目雅子さんみたい」「めっちゃ綺麗に」称賛の声
野口健氏”ノーヘル”電動キックボードに困惑「邪魔な存在」「できれば…消えてくれないかな」
18日から名人戦第4局 藤井名人、初防衛決めるか 大分・別府
泉房穂氏「何にも変わってない。まったく無意味」自民党の政治資金規正法改正案をめぐり大噴火
フジ会長に嘉納修治カンテレ会長が復帰 大多亮専務はカンテレ社長、矢延取締役は2階級特進
有働由美子アナが54歳友人女優の自宅に刺激受け整理整頓「ものがいっぱいあるけど統一されてる」
健大高崎は春夏連覇へ選手層厚くしている段階 花咲徳栄の大型遊撃手・石塚裕惺注目 春季関東大会
加護亜依、デビュー記念日にファンクラブ開設「24周年目突入!これからも応援よろしく」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
大谷翔平が不運な判定で2度見逃し三振 「えん罪退場」で話題の球審は引き揚げる大谷にブチギレ
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
吉野家が「マスク外し強要疑惑」でプチ炎上、店員さんに聞いてみると……
時代劇の常識を覆す!仇討ち・無礼討ちの厳格なルール
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
藤田ニコル「脱ぐ予定なかったのですが気づいたらノリノリで…」ヒョウ柄水着姿に大反響
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
3度逮捕の38歳小向美奈子「今はやってないですよね?」の直撃質問に”回答”
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
大谷翔平が不運な判定で2度見逃し三振 「えん罪退場」で話題の球審は引き揚げる大谷にブチギレ
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
73歳神田正輝「旅サラダ」生放送で“12歳下俳優”から呼び捨てされ激論
一世風靡した元ギャル38歳タレントが桃色ロングヘアで生放送登場、長男はもう16歳高1
逮捕の「つばさの党」代表、2017年衆院選山口4区でも演説妨害
44歳女性お笑いタレントの近影に「目元が夏目雅子さんみたい」「めっちゃ綺麗に」称賛の声
野口健氏”ノーヘル”電動キックボードに困惑「邪魔な存在」「できれば…消えてくれないかな」
18日から名人戦第4局 藤井名人、初防衛決めるか 大分・別府
泉房穂氏「何にも変わってない。まったく無意味」自民党の政治資金規正法改正案をめぐり大噴火
フジ会長に嘉納修治カンテレ会長が復帰 大多亮専務はカンテレ社長、矢延取締役は2階級特進
有働由美子アナが54歳友人女優の自宅に刺激受け整理整頓「ものがいっぱいあるけど統一されてる」
健大高崎は春夏連覇へ選手層厚くしている段階 花咲徳栄の大型遊撃手・石塚裕惺注目 春季関東大会
加護亜依、デビュー記念日にファンクラブ開設「24周年目突入!これからも応援よろしく」