オムロン サイニックエックス、京大、東工大、奈良先端大と、ロボット制御に関する共同研究開始
オムロン サイニックエックス、 ロボット制御に関する共同研究プロジェクトを 京都大学・東京工業大学・奈良先端科学技術大学院大学と開始 ~画像認識と自然言語*1処理を組み合わせた言語指示で ロボットの多様な作業の実現を目指す~
オムロン サイニックエックス(本社所在地:東京都文京区、代表取締役社長:諏訪正樹、以下、OSX)は、京都大学(所在地:京都府京都市左京区、総長:湊長博)、東京工業大学(所在地:東京都目黒区、学長:益一哉)、奈良先端科学技術大学院大学(所在地:奈良県生駒市、学長:塩﨑一裕)と共同で、自然言語指示によるロボット制御によって、ロボットの多様な作業を可能にする研究プロジェクトを開始しました。本プロジェクトでは、言葉による指示によってロボットが作業に必要な動作の一覧を生成するアルゴリズム開発と、生成された動作を人と身体性*2が異なるロボットの動作に自動で変換しロボットを制御する技術の構築を目指します。
本研究を通じて、OSXは人と機械が対話し、パートナーのような関係性を築くことで、人がより創造的な活動をおこなうことができる「人と機械が融和」した世界の実現を目指します。
*1)自然言語とは、私たち人間が日常書いたり話したりしている日本語や英語のような、自然な言語のことを表します。
*2)身体性とは、体の動き方や可動性を表します。
近年、さまざまな業種・業態において労働力不足が社会的課題となっており、ロボットを使って人の作業を代替する取り組みが盛んに行われています。こうした中、人からの言葉の指示によってロボットに作業を代替させる技術は、ロボット制御に関する専門知識を必要とせず、ユーザーが話しかけるだけでロボットに作業の内容を伝えることができる技術として期待が高まっています。他方、現在実現されているシステムの多くは、箱の中から指示した物を掴み移動させるといった特定のシーンにおけるロボット制御にとどまっています。様々なシーンでロボットに作業を代替させるためには、作業の目的からそれに必要となる動作の一覧を生成でき、それに基づいてロボットを簡単に制御できるアルゴリズムが必要です。
これらの課題に対して、人からの自然言語指示で様々なシーンにおいてロボットを制御するアルゴリズムの研究開発を、OSXと京都大学、東京工業大学、奈良先端科学技術大学院大学による共同研究プロジェクトとして取り組みます。
【画像:https://kyodonewsprwire.jp/img/202111103166-O2-oDcA3bT3】
自然言語指示によるロボット制御研究の多くは、「モノを掴む」や「部屋を移動する」といった単純な動作にとどまっています。そこで、本プロジェクトでは、作業工程の写真や、実際に人間が作業している動画をもとに、機械学習によって自然言語指示と動作環境の情報から、「初期状態」を「指示内容を実行した後の状態」にするという動作の“意図”を形成し、作業に必要となる動作を生成するアルゴリズム開発を行います。
また、生成された動作は学習データとしている人の動作に基づいているため、ロボットでその動作を実現するためには、人とロボットの身体性の違いを考慮し、ロボットに合わせた制御方法を実現する必要があります。そこで、本プロジェクトでは、人とロボットの身体性の違いによる影響を解決するために、「道具の使い方」に着目します。「道具の使い方」は人もロボットも同じはずという前提のもと、人が行う複数の作業動画における道具を使っているシーンから学習し、例えばニンジンの皮を剥く際のニンジンへのピーラーの当て方といった、道具の使い方や力加減を真似することでロボットアームの動作モデルの生成を目指します。
これらの研究を進めることで、人がロボットに言葉で指示をするだけでロボットが自動的に取るべき動作を理解し、道具を使いながら作業を遂行できるようになり、ロボットの社会的意義をこれまで以上に高められる可能性があります。さらにこれらの機能の社会実装を通じて新たな課題発見への期待も見込まれます。
OSXでは、今後も積極的に社内外との共創を進め、研究を通じて新たなイノベーションを創造し、よりよい社会づくりに貢献していきます。
■取組期間
2021年度から2023年度までの3年間
※本共同研究プロジェクトは、日本学術振興会による令和3(2021)年度の科学研究費助成事業 基盤研究(A) 21H04910の支援を受けて遂行します。
■各機関の役割
オムロン サイニックエックス:研究プロジェクトの代表者(研究統括)
各機関における研究成果に基づく統合的なシステム開発の主担当
画像や触覚に基づいたロボット制御信号の生成の主担当
各共同研究機関が主として担当する課題の副担当
京都大学大学院情報学研究科
言語指示からの、実行すべき動作系列の生成の主担当
東京工業大学 情報理工学院 情報工学系
画像や触覚に基づいた動作記述を獲得する研究・開発の主担当
奈良先端科学技術大学院大学 先端科学技術研究科 情報科学領域
動作系列を入力としたロボット制御信号の生成に関する研究・開発の主担当
オムロン サイニックエックス株式会社について
オムロン サイニックエックス株式会社は、オムロンの考える"近未来デザイン"を創出する戦略拠点です。「AI」「ロボティクス」「IoT」「センシング」など、幅広い領域の最先端技術のトップ人財が研究員として在籍し、社会的課題を解決するために、技術革新をベースに「ビジネスモデル」「技術戦略」「知財戦略」を統合し具体的な事業アーキテクチャに落とし込んだ"近未来デザイン"を創り出します。また、大学や社外研究機関との共同研究を通じて「近未来デザイン」の創出を加速していきます。詳細については、https://www.omron.com/sinicx/をご参照ください。
本件に関するお問い合わせ先
オムロン株式会社 イノベーション推進本部
エンゲージメント・コミュニケーション部
TEL: 0774-74-2010
「全国のキャバ嬢がロックオン」億プレーヤークロちゃん、番組内での“失言”を反省
【Amazon×dポイント】誰でも貯まる・使える、二重取りも可能! 連携方法と注意点
喜劇参加20年、「笑点」司会…64歳春風亭昇太とかけて落語若手界の長老ととく、そのココロは
土屋太鳳、弟・神葉とファイティングポーズ 「お手本」ウルトラマンゼロ描いたパネル前で
火将ロシエル 憧れのジャッキー・チェンへの思いをつづり、自室に飾るコレクションも披露
ドジャース山本由伸がブルペン投球 パドレス・ダルビッシュも左斜め後ろから見守る
えなこ、ボーイッシュな最新ショット「なんで帽子とTシャツ姿がそんなにかわいいの!」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
草刈民代、誕生日に夫・周防正行監督と道端でのツーショット「素敵な記念写真ですね」
犬が車に乗ろうとした結果…『足が短すぎて苦戦する光景』が可愛すぎると77万再生「何度も挑戦するの尊い」「頑張れー!」応援の声も
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
73歳神田正輝「旅サラダ」生放送で“12歳下俳優”から呼び捨てされ激論
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
55歳森口博子「だっちゅーの」鮮やかビキニ姿披露にX歓喜「破壊力ハンパない」「スゴすぎ」
「ふてほど」25歳女優“薔薇ブラ”でポロリ寸前?過激衣装に「見えちゃう」「刺激強すぎ」
曙と熱愛した相原勇(52)の現在が衝撃的すぎると話題に
大物炎上系ユーチューバー”衝撃の預金残高”公開「すげぇ」「エグい」驚きの声
水原一平容疑者 最高刑「懲役33年」トレンド入り 「人生詰んだ」「稀代の詐欺師」の声
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
深夜のファミリーマート徘徊、必ず入っている「フエラムネのミニチュアおもちゃ付」を探し求めた結果……
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
小澤征悦と再婚した桑子真帆アナ(34)黒い過去が流出、衝撃の過去にネット騒然
ガーシー、佐野ひなこの暴露を示唆でネット騒然「ファンだったのに」
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
「全国のキャバ嬢がロックオン」億プレーヤークロちゃん、番組内での“失言”を反省
【Amazon×dポイント】誰でも貯まる・使える、二重取りも可能! 連携方法と注意点
喜劇参加20年、「笑点」司会…64歳春風亭昇太とかけて落語若手界の長老ととく、そのココロは
土屋太鳳、弟・神葉とファイティングポーズ 「お手本」ウルトラマンゼロ描いたパネル前で
ドジャース山本由伸がブルペン投球 パドレス・ダルビッシュも左斜め後ろから見守る
火将ロシエル 憧れのジャッキー・チェンへの思いをつづり、自室に飾るコレクションも披露
えなこ、ボーイッシュな最新ショット「なんで帽子とTシャツ姿がそんなにかわいいの!」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
草刈民代、誕生日に夫・周防正行監督と道端でのツーショット「素敵な記念写真ですね」
犬が車に乗ろうとした結果…『足が短すぎて苦戦する光景』が可愛すぎると77万再生「何度も挑戦するの尊い」「頑張れー!」応援の声も