「入力音声に適した顔画像生成AI技術」の論文が、音声処理系トップカンファレンス INTERSPEECH 2023に採択
株式会社RevComm(レブコム、本社:東京都渋谷区、代表取締役:會田武史)の研究開発組織、RevComm Research(レブコム・リサーチ、RCR)による「入力音声に適した顔画像の生成(音声−顔変換)」に関する論文が、音声処理系トップカンファレンス「INTERSPEECH 2023」に採択されました。
【画像:https://kyodonewsprwire.jp/img/202308188186-O1-Zl2bmC5o】
INTERSPEECHとは
INTERSPEECHは、International Speech Communication Association (ISCA) が主催する音声言語処理分野で最も大規模かつ重要な国際会議です。この会議には、自然科学・人文科学の別け隔てなく、世界各国の音声言語処理の研究者が参加し、人間及び機械における音声言語の処理に関する基礎から応用まで包括する学際的な研究発表と討議が行われます。そして、この会議で発表された最新の研究成果を通じて、広く社会の発展や向上に寄与することを目的としています。採択された論文は8月20〜24日にアイルランドのダブリンで開催される「INTERSPEECH 2023」にて発表を行います。
論文内容
RCRの研究の成果として、シニアリサーチエンジニアの加藤集平、リサーチディレクターの橋本泰一が、入力音声に適した顔画像の生成(音声−顔変換)に関する論文「Speech-to-Face Conversion Using Denoising Diffusion Probabilistic Models」を「INTERSPEECH2023」に投稿し、採択されました。レブコムは、筑波大学や京都大学との共同研究の成果として、INTERSPEECHに論文を採択されたことがありますが、レブコム単著としては今回が初の採択となります。
本研究は、画像生成AI技術を音声に応用したもので、音声データを入力すると、その声で喋りそうな顔をAIが生成します。従来よりも高品質な顔画像を生成できる技術を開発しました。
顔画像を生成するモデルについて、従来の手法ではなく、テキストから画像を生成するタスクにおいて最高性能を達成している、拡散モデルを新たに導入し、音声−顔変換のタスクにおいても高品質の画像を生成できることを示しました。
また、動画から抽出した音声−顔画像のペアデータのみを用いたモデル訓練の構造を見直すことで、写真由来の高解像度の顔画像単独のデータを訓練データとして使用できるようにしました。これにより、顔画像出力の解像度を大幅に向上させることに成功しました。
本研究の成果は、電話において通話相手の顔が分からない時に、音声からアバターを生成して画面に表示することで、コミュニケーション促進につながるという将来的な応用が期待されます。
このたび採択された論文
Speech-to-Face Conversion Using Denoising Diffusion Probabilistic Models
Shuhei Kato, Taiichi Hashimoto (RevComm, Inc., Japan)
論文の詳細はこちら
https://www.isca-speech.org/archive/interspeech_2023/kato23_interspeech.html
RCRはAI技術領域にイノベーションをもたらし、コミュニケーションをより豊かにしていくことを目指しています。そのために、今後も音声・言語・画像の領域に関わる研究開発を推進し、国内外への学術的貢献や製品・サービスのAI技術の深化を積極的に行います。
「RevComm Research(レブコム・リサーチ、 RCR)」とは
「RCR」は、人びとがお互いをよくわかりあえる社会を目指し、コミュニケーションの新しい形について研究開発する組織です。人は他者とのコミュニケーションの中でしばしば摩擦や不平等な事態が起き、お互いに理解できない、信頼できない場面が引き起こされます。そのような摩擦をなくすための技術を開発し、より柔軟で誤解のない適切なコミュニケーションができる環境作りを進めます。 また、「RCR」には、「Research for Communication Revolution」の意味も含まれています。「コミュニケーションを再発明し、人が人を想う社会を創る。」という企業理念のもと、音声技術とAIの研究開発により、コミュニケーション課題の解決に取り組みます。
RCRサイト:https://www.revcomm.co.jp/rcr/
これまでの活動実績:https://www.revcomm.co.jp/rcr/information/
【画像:https://kyodonewsprwire.jp/img/202308188186-O2-T8g7wTT0】
株式会社RevComm 会社概要
「コミュニケーションを再発明し、人が人を想う社会を創る。」という理念のもと、音声技術とAIにより、コミュニケーション課題を解決する企業です。
音声解析AI電話「MiiTel」は、インサイドセールス市場を中心に、営業やコールセンター業務におけるトークの可視化とセルフコーチング、テレワーク体制構築にご活用いただいています。また、AI搭載オンライン会議解析ツール「MiiTel Meetings」は、複数人でのオンライン会議の解析や振り返りが可能となり、営業の成約率を飛躍させます。オフライン(対面)の商談を可視化する「MiiTel RecPod(α版)」の提供も開始し、コミュニケーションが発生するすべての場所における会話のビッグデータ化を実現します。
Forbes JAPAN「日本の起業家ランキング TOP20」、週刊東洋経済「すごいベンチャー100」に選出されたほか、2023年4月にはアジア企業で唯一、米国「Forbes AI 50 2023」に選出、2023年5月にはデロイト トーマツ グループ「Technology Fast 50 2022 Japan」で1位を受賞しました。
・企業名 : 株式会社RevComm
・所在地 : 150-0002東京都渋谷区渋谷1-3-9 ヒューリック渋谷一丁目ビル7階
・代表者 : 會田 武史
・事業内容 : AI × 音声のソフトウェア・データベースの開発
・企業サイト: https://www.revcomm.co.jp/
※記載されている会社名および商品・製品・サービス名(ロゴマーク等を含む)は、各社の商標または各権利者の登録商標です
小倉優子、不自然な“二重ライン”にネット騒然「やっぱり整形?」
大分妻子殺害の被告、身勝手な動機 遺族は傍聴席の柵越え憤慨
植村あかり4冊目の写真集発売「夢のような1冊」6月の卒コンへ「曲数は“23”にしたい」
【ヤクルト】今季ワースト5連敗 高津監督バッサリ「解説しようがない」高橋奎二5回途中4失点
東京・品川の住宅で母子4人死亡、首や胸に刃物の傷 父は煙吸い込む
【阪神】大山悠輔2戦連続V打点もその後好機に凡退反省「追加点取れるチャンスいっぱいあった」
【阪神】森下翔太「見ながら追えた」大飛球フェンスギリギリ好捕「大山さんにつなぐ意識」で犠飛
【阪神】岡田監督「やられるパターンやけどな」1万試合目「岡田の野球」で貯金今季最多の7に
本田圭佑がFIFA総会で「アーセン」と指導者ライセンスを語り合う「賛同してくれていたと思う」
自称「カトパン」似の100キロ女芸人、ブラトップ姿でダンス「躍動する脂肪、頼りない足首」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
TikTokを賑わす「フエラムネごめんなサイダー味」がセブンイレブンで再販!じゅるるマスカットも買うなら今!
小倉優子、不自然な“二重ライン”にネット騒然「やっぱり整形?」
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
吉住、なぜかR-1グランプリの大爆笑ネタが炎上させられてしまう事態に
藤田ニコル「初めてした日」ゆうちゃみ「体位とかも全部」親に明かしたギャル的「性事情」に騒然
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
俳優の中尾彬さんが死去、81歳 幅広く活躍 トレードマークは「ねじねじ」 妻は池波志乃
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
TikTokを賑わす「フエラムネごめんなサイダー味」がセブンイレブンで再販!じゅるるマスカットも買うなら今!
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
小倉優子、不自然な“二重ライン”にネット騒然「やっぱり整形?」
小倉優子、不自然な“二重ライン”にネット騒然「やっぱり整形?」
大分妻子殺害の被告、身勝手な動機 遺族は傍聴席の柵越え憤慨
植村あかり4冊目の写真集発売「夢のような1冊」6月の卒コンへ「曲数は“23”にしたい」
東京・品川の住宅で母子4人死亡、首や胸に刃物の傷 父は煙吸い込む
【ヤクルト】今季ワースト5連敗 高津監督バッサリ「解説しようがない」高橋奎二5回途中4失点
【阪神】大山悠輔2戦連続V打点もその後好機に凡退反省「追加点取れるチャンスいっぱいあった」
【阪神】森下翔太「見ながら追えた」大飛球フェンスギリギリ好捕「大山さんにつなぐ意識」で犠飛
本田圭佑がFIFA総会で「アーセン」と指導者ライセンスを語り合う「賛同してくれていたと思う」
【阪神】岡田監督「やられるパターンやけどな」1万試合目「岡田の野球」で貯金今季最多の7に
自称「カトパン」似の100キロ女芸人、ブラトップ姿でダンス「躍動する脂肪、頼りない足首」