円滑なコミュ二ケーションを可能にするWeb会議システムを発明。仮想カメラで視線が合わない違和感を解消。
画面中央に生成された"仮想カメラ"で、視線が合わない違和感を解消。
円滑なコミュ二ケーションを可能にする革新的なWeb会議システムを発明。
金沢工業大学 メディア情報学科 坂知樹助教
オンラインでも視線を合わせながらの会話を可能にするWeb会議システムを、金沢工業大学情報フロンティア学部メディア情報学科 坂知樹助教(専門:画像処理、医用画像処理)が発明しました。
当発明は令和2年12月11日に特許出願済です(特願2020-205631)。
これまで視線が合うWeb会議システムは報告が無く、新規需要が期待されています。
新型コロナウイルス感染症(COVID-19)がきっかけとなり、テレワークやネット授業が日常的になりました。アフターコロナにおいてもオンラインでのコミュニケーションは"ニューノーマル"になっていくものと考えられています。一方で、今日一般的に使用されているWeb会議システムは、相手の顔が見える画面とカメラが違う位置にあるため、対面と違ってユーザ同士の視線が合わず、違和感を覚えてしまうケースが多いという課題があります。
【画像:https://kyodonewsprwire.jp/img/202012158614-O2-0aj8iutC】
画面の相手を観ながら話すと視線が合わなくなる
今回発明されたシステムは、画面の両脇(左右もしくは上下)に置かれたカメラで画面中央に"仮想カメラ"を生成し、ユーザを正面から撮影したような映像を仮想的に表示します。
画面の相手と目線を合わせながら違和感なくコミュニケーションができるため、テレワークにおけるテレビ会議システムやWeb面接システムでの実用化が期待されます。また視線のずれなく鏡を見るように写真撮影が可能になるため、証明写真機等の分野でも新規需要が見込まれます。
当システムの実用化に向けて、今後、企業との連携を進めていく考えです。
新たに発明されたWeb会議システムの概要
【先行技術の課題】
現在、一般的なWeb会議システムに用いられるハードウェアは以下の2通りの形式があり、いずれも画面およびカメラがハードウェアの前面に設置されています(図1)。
【画像:https://kyodonewsprwire.jp/img/202012158614-O3-XMBmPs8Q】 【画像:https://kyodonewsprwire.jp/img/202012158614-O4-kyC8Culn】
図1 先行のWeb会議システム(ハードウェア)
左:画面長辺にカメラを設置する形式、右:画面短辺にカメラを設置する形式
これらのハードウェアを用いてWeb会議システムを動作させた場合、ユーザが画面内の会議相手の顔に視線を向けると、カメラから視線がずれてしまい、ユーザ同士が視線を合わせて会話することが困難となります(図2)。
また画面中央にカメラを設置することで画面に視線を合わせるユーザを正面から撮影できますが、この場合はカメラが画面を遮蔽してしまう問題があります。
【画像:https://kyodonewsprwire.jp/img/202012158614-O2-0aj8iutC】
図2 先行のWeb会議システム(アプリケーション)
左:画面上部にカメラを設置した場合、右:画面右部にカメラを設置した場合
【本発明の本質】
本発明の本質は、「画面の両脇(左右もしくは上下)に画面を挟むように2台のカメラを設置」し(図3)、これらで撮影した画像を合成することで「画面中央にあるカメラがユーザを正面から撮影したような映像を仮想的に生成」することにあります。
【表:https://kyodonewsprwire.jp/prwfile/release/M102928/202012158614/_prw_OT1fl_72G6W7F3.png】
生成された「画面の中央に位置する仮想カメラより撮影された画像」をWeb会議システムに表示することで(図4)、ユーザ同士の視線が合うWeb会議システムが実現します。
【画像:https://kyodonewsprwire.jp/img/202012158614-O7-Yb7Ova5u】
図4 発明したWeb会議システム(アプリケーション)
この「画面中央に位置する仮想カメラより撮影された画像」は「ステレオマッチング」という技術を応用しています。
ステレオマッチングとは、人間が左右の目でモノを立体的に見る仕組みと同様に、左右のカメラで撮影した2枚の2次元画像から視差を推定し3次元の情報を推定する手法です。
本発明ではこのステレオマッチング技術を用いて、2台のカメラの中間に位置する「仮想カメラ」が撮影した画像を推定します。 「仮想カメラより撮影された画像」を画面に表示することで、ユーザは画面内に映る会議相手と視線が合います。
【画像:https://kyodonewsprwire.jp/img/202012158614-O8-h70332q3】
プロトタイプの画像
画面の両脇(左右もしくは上下)に画面を挟むように2台のカメラを設置することで、画面中央に仮想カメラを生成する
【表:https://kyodonewsprwire.jp/prwfile/release/M102928/202012158614/_prw_OT2fl_Rst3hn1Q.png】
【画像:https://kyodonewsprwire.jp/img/202012158614-O11-Q936x0Zl】
画面中央に位置する仮想カメラより撮影された画像
本発明の効果
・ユーザ同士の視線が合う
・円滑なコミュニケーションが可能となる
・ユーザが自分自身を撮影する際に鏡を見るように表示できる
技術分野、用途、実用化例
・テレビ通話システム:話し相手と視線が合う
・Web面接システム:面接官と受験者の視線が合う
・証明写真機:鏡を見るように証明写真を撮影できる
想定される技術移転先(業界・企業)
・(ハードウェア)スマートフォンメーカー、PCメーカー、周辺機器メーカー
・( アプリケーション ) ソーシャル・ネットワーキング・サービス会社
ピーコさん死去、79歳多臓器不全 双子の弟おすぎとおねえタレントの草分け的存在として活躍
「ピーコさん」死去で存命の弟「おすぎさん」と一緒にXトレンド入り「嘘でしょ?」驚きの声
【巨人】離脱中の萩尾匡也「明日もここで試合を」2戦連続円陣、“寿司レース”マグロ姿で鼓舞
【データ】3安打巨人はCSでの最少安打勝利 逆王手から連勝で日本S決めたのは過去3球団
東洋大姫路・岡田監督「履正社は古豪とは言われない」甲子園V経験から就任、母校を「強豪校」へ
青森山田2連覇かなわず「この負けがあったから」菊池伊真センバツへ、日本一へ前を向く/東北
【ソフトバンク】小久保監督「4つ勝てばいい」日本シリーズ12連勝中も気にせず/一問一答
【巨人】阿部監督「この勝ち方じゃないと勝てないのかな」ピンチ耐え好守で流れ呼び日本S逆王手
宮澤佐江「AKB48大衣装展」でさえゆきデート!「思い出いっぱいの衣装を見て懐かしく…」
横浜強盗殺人 22歳容疑者、指示役と連絡「場所を指定された」
俳優・西田敏行さん死去 76歳 「釣りバカ日誌」「おんな太閤」
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
ほんこん、殺害予告メール脅迫うけ被害届提出を決意「こういう卑怯なことを…屈したらあかん」
足立梨花、際どく加工された自身のグラビアに不快感「まじで気持ち悪いです」
四千頭身、テレビから消えた理由を明かすも批判殺到「人のせいにするな」
「愛が生まれた日」藤谷美和子(56)の現在がヤバい!?徘徊生活を送っていた過去も明らかに。
女性歌手「変態も堂々と街を歩ける社会…そんなのみんな望んでいたんだろうか」多様性めぐり持論
ドジャースの23歳が大敗ムード打ち消す2打席連発 伏兵9番打者で大敗ムードから乱打戦に
明石家さんま、“恋愛寸前の仲”だった大物女優とのツーショに反響「当時噂にもなったんですよ」
おぎやはぎ暴露「すごい態度悪い、ただのヤンキー」結婚発表した27歳女優のデビュー直後を回想
俳優・西田敏行さん死去 76歳 「釣りバカ日誌」「おんな太閤」
「愛が生まれた日」藤谷美和子(56)の現在がヤバい!?徘徊生活を送っていた過去も明らかに。
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
四千頭身、テレビから消えた理由を明かすも批判殺到「人のせいにするな」
ほんこん、殺害予告メール脅迫うけ被害届提出を決意「こういう卑怯なことを…屈したらあかん」
足立梨花、際どく加工された自身のグラビアに不快感「まじで気持ち悪いです」
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
女性歌手「変態も堂々と街を歩ける社会…そんなのみんな望んでいたんだろうか」多様性めぐり持論
ドジャースの23歳が大敗ムード打ち消す2打席連発 伏兵9番打者で大敗ムードから乱打戦に
明石家さんま、“恋愛寸前の仲”だった大物女優とのツーショに反響「当時噂にもなったんですよ」
ピーコさん死去、79歳多臓器不全 双子の弟おすぎとおねえタレントの草分け的存在として活躍
「ピーコさん」死去で存命の弟「おすぎさん」と一緒にXトレンド入り「嘘でしょ?」驚きの声
【巨人】離脱中の萩尾匡也「明日もここで試合を」2戦連続円陣、“寿司レース”マグロ姿で鼓舞
【データ】3安打巨人はCSでの最少安打勝利 逆王手から連勝で日本S決めたのは過去3球団
東洋大姫路・岡田監督「履正社は古豪とは言われない」甲子園V経験から就任、母校を「強豪校」へ
青森山田2連覇かなわず「この負けがあったから」菊池伊真センバツへ、日本一へ前を向く/東北
【ソフトバンク】小久保監督「4つ勝てばいい」日本シリーズ12連勝中も気にせず/一問一答
【巨人】阿部監督「この勝ち方じゃないと勝てないのかな」ピンチ耐え好守で流れ呼び日本S逆王手
宮澤佐江「AKB48大衣装展」でさえゆきデート!「思い出いっぱいの衣装を見て懐かしく…」
横浜強盗殺人 22歳容疑者、指示役と連絡「場所を指定された」