「入力音声に適した顔画像生成AI技術」の論文が、音声処理系トップカンファレンス INTERSPEECH 2023に採択
株式会社RevComm(レブコム、本社:東京都渋谷区、代表取締役:會田武史)の研究開発組織、RevComm Research(レブコム・リサーチ、RCR)による「入力音声に適した顔画像の生成(音声−顔変換)」に関する論文が、音声処理系トップカンファレンス「INTERSPEECH 2023」に採択されました。
【画像:https://kyodonewsprwire.jp/img/202308188186-O1-Zl2bmC5o】
INTERSPEECHとは
INTERSPEECHは、International Speech Communication Association (ISCA) が主催する音声言語処理分野で最も大規模かつ重要な国際会議です。この会議には、自然科学・人文科学の別け隔てなく、世界各国の音声言語処理の研究者が参加し、人間及び機械における音声言語の処理に関する基礎から応用まで包括する学際的な研究発表と討議が行われます。そして、この会議で発表された最新の研究成果を通じて、広く社会の発展や向上に寄与することを目的としています。採択された論文は8月20〜24日にアイルランドのダブリンで開催される「INTERSPEECH 2023」にて発表を行います。
論文内容
RCRの研究の成果として、シニアリサーチエンジニアの加藤集平、リサーチディレクターの橋本泰一が、入力音声に適した顔画像の生成(音声−顔変換)に関する論文「Speech-to-Face Conversion Using Denoising Diffusion Probabilistic Models」を「INTERSPEECH2023」に投稿し、採択されました。レブコムは、筑波大学や京都大学との共同研究の成果として、INTERSPEECHに論文を採択されたことがありますが、レブコム単著としては今回が初の採択となります。
本研究は、画像生成AI技術を音声に応用したもので、音声データを入力すると、その声で喋りそうな顔をAIが生成します。従来よりも高品質な顔画像を生成できる技術を開発しました。
顔画像を生成するモデルについて、従来の手法ではなく、テキストから画像を生成するタスクにおいて最高性能を達成している、拡散モデルを新たに導入し、音声−顔変換のタスクにおいても高品質の画像を生成できることを示しました。
また、動画から抽出した音声−顔画像のペアデータのみを用いたモデル訓練の構造を見直すことで、写真由来の高解像度の顔画像単独のデータを訓練データとして使用できるようにしました。これにより、顔画像出力の解像度を大幅に向上させることに成功しました。
本研究の成果は、電話において通話相手の顔が分からない時に、音声からアバターを生成して画面に表示することで、コミュニケーション促進につながるという将来的な応用が期待されます。
このたび採択された論文
Speech-to-Face Conversion Using Denoising Diffusion Probabilistic Models
Shuhei Kato, Taiichi Hashimoto (RevComm, Inc., Japan)
論文の詳細はこちら
https://www.isca-speech.org/archive/interspeech_2023/kato23_interspeech.html
RCRはAI技術領域にイノベーションをもたらし、コミュニケーションをより豊かにしていくことを目指しています。そのために、今後も音声・言語・画像の領域に関わる研究開発を推進し、国内外への学術的貢献や製品・サービスのAI技術の深化を積極的に行います。
「RevComm Research(レブコム・リサーチ、 RCR)」とは
「RCR」は、人びとがお互いをよくわかりあえる社会を目指し、コミュニケーションの新しい形について研究開発する組織です。人は他者とのコミュニケーションの中でしばしば摩擦や不平等な事態が起き、お互いに理解できない、信頼できない場面が引き起こされます。そのような摩擦をなくすための技術を開発し、より柔軟で誤解のない適切なコミュニケーションができる環境作りを進めます。 また、「RCR」には、「Research for Communication Revolution」の意味も含まれています。「コミュニケーションを再発明し、人が人を想う社会を創る。」という企業理念のもと、音声技術とAIの研究開発により、コミュニケーション課題の解決に取り組みます。
RCRサイト:https://www.revcomm.co.jp/rcr/
これまでの活動実績:https://www.revcomm.co.jp/rcr/information/
【画像:https://kyodonewsprwire.jp/img/202308188186-O2-T8g7wTT0】
株式会社RevComm 会社概要
「コミュニケーションを再発明し、人が人を想う社会を創る。」という理念のもと、音声技術とAIにより、コミュニケーション課題を解決する企業です。
音声解析AI電話「MiiTel」は、インサイドセールス市場を中心に、営業やコールセンター業務におけるトークの可視化とセルフコーチング、テレワーク体制構築にご活用いただいています。また、AI搭載オンライン会議解析ツール「MiiTel Meetings」は、複数人でのオンライン会議の解析や振り返りが可能となり、営業の成約率を飛躍させます。オフライン(対面)の商談を可視化する「MiiTel RecPod(α版)」の提供も開始し、コミュニケーションが発生するすべての場所における会話のビッグデータ化を実現します。
Forbes JAPAN「日本の起業家ランキング TOP20」、週刊東洋経済「すごいベンチャー100」に選出されたほか、2023年4月にはアジア企業で唯一、米国「Forbes AI 50 2023」に選出、2023年5月にはデロイト トーマツ グループ「Technology Fast 50 2022 Japan」で1位を受賞しました。
・企業名 : 株式会社RevComm
・所在地 : 150-0002東京都渋谷区渋谷1-3-9 ヒューリック渋谷一丁目ビル7階
・代表者 : 會田 武史
・事業内容 : AI × 音声のソフトウェア・データベースの開発
・企業サイト: https://www.revcomm.co.jp/
※記載されている会社名および商品・製品・サービス名(ロゴマーク等を含む)は、各社の商標または各権利者の登録商標です
【日本ハム】マルティネス「モウチョット…カタロース」9回フェン直適時三塁打も前夜食事反省
【阪神】ノイジー、フェンス激突の気迫堅守で勝利貢献「フライが上がったらそれを捕るのが仕事」
【巨人】母の日ピンクバット坂本勇人「赤バット」川上哲治氏並ぶ通算2351安打 16打席ぶり右前打
元世界3階級制覇王者の八重樫東氏、井上尚弥の次戦プランに言及「ボクシング好きの王様がいる」
水樹奈々「たまりにたまったエネルギーを放出した」6年ぶりキングレコードのアニソンフェス
【巨人】岡本和真2戦連発、リーグ最多並ぶ先制8号ソロ「母の日」感謝の気持ちをバットでも
【ロッテ】吉井理人監督「油断みたいな守備。野球の神様は許してくれない」サヨナラ負けで3連敗
札幌龍谷学園サヨナラ勝ちで初戦突破 カブレラ好き米田龍ノ助が代打で公式戦初出場サヨナラ犠飛
日本文理・鈴木崇監督、帝京長岡に2-4も完敗認める「夏に向けてアドバイスをもらった」
【阪神】プロ初1番井上広大、貴重なつなぎの一打で決勝点導く 女手一つで育ててくれた母に感謝
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
73歳神田正輝「旅サラダ」生放送で“12歳下俳優”から呼び捨てされ激論
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
曙と熱愛した相原勇(52)の現在が衝撃的すぎると話題に
55歳森口博子「だっちゅーの」鮮やかビキニ姿披露にX歓喜「破壊力ハンパない」「スゴすぎ」
「ふてほど」25歳女優“薔薇ブラ”でポロリ寸前?過激衣装に「見えちゃう」「刺激強すぎ」
大物炎上系ユーチューバー”衝撃の預金残高”公開「すげぇ」「エグい」驚きの声
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
水原一平容疑者 最高刑「懲役33年」トレンド入り 「人生詰んだ」「稀代の詐欺師」の声
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
深夜のファミリーマート徘徊、必ず入っている「フエラムネのミニチュアおもちゃ付」を探し求めた結果……
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
小澤征悦と再婚した桑子真帆アナ(34)黒い過去が流出、衝撃の過去にネット騒然
ガーシー、佐野ひなこの暴露を示唆でネット騒然「ファンだったのに」
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
【日本ハム】マルティネス「モウチョット…カタロース」9回フェン直適時三塁打も前夜食事反省
【阪神】ノイジー、フェンス激突の気迫堅守で勝利貢献「フライが上がったらそれを捕るのが仕事」
【巨人】母の日ピンクバット坂本勇人「赤バット」川上哲治氏並ぶ通算2351安打 16打席ぶり右前打
元世界3階級制覇王者の八重樫東氏、井上尚弥の次戦プランに言及「ボクシング好きの王様がいる」
水樹奈々「たまりにたまったエネルギーを放出した」6年ぶりキングレコードのアニソンフェス
【巨人】岡本和真2戦連発、リーグ最多並ぶ先制8号ソロ「母の日」感謝の気持ちをバットでも
【ロッテ】吉井理人監督「油断みたいな守備。野球の神様は許してくれない」サヨナラ負けで3連敗
札幌龍谷学園サヨナラ勝ちで初戦突破 カブレラ好き米田龍ノ助が代打で公式戦初出場サヨナラ犠飛
日本文理・鈴木崇監督、帝京長岡に2-4も完敗認める「夏に向けてアドバイスをもらった」
【阪神】プロ初1番井上広大、貴重なつなぎの一打で決勝点導く 女手一つで育ててくれた母に感謝