株式会社アイシンが生成 AI を活用し、聞き取りに困難のある人を支援
株式会社アイシンが開発した「YYSystem」は、音声を認識し、文字などに変換するアプリシリーズです。聴覚に障碍のある方をはじめ、コミュニケーションに困難を抱えるあらゆる人々に利用されていますが、特に 生成AIを活用したMicrosoft Azure OpenAI Service の要約機能が LiD/APD (聞き取り困難症/聴覚情報処理障碍) のある方々に役立っています。
ここでは、YYSystem がいかに LiD/APD のある方々の生活体験を向上させているかについて概要をお伝えします。
ストーリーの全文はこちらからご覧ください。
【画像:https://kyodonewsprwire.jp/img/202312043764-O1-361U5K6d】
キャプション: YYSystem のアプリを使って会話する様子
添田洋美さんは幼少の頃から人の話を聞き取ることが苦手でした。家庭内でも、換気扇の音や流水音などの生活音があると、子供たちの声を聞き取るのに苦労しました。医師による検査を受けても耳に異常は見つからず、耳で聞いた言葉を脳で処理することができない状態の「LiD/APD (聞き取り困難症/聴覚情報処理障害)」があると診断されたのは、わずか 3 年前のことでした。
LiD/APD は日本での認知度が低いため、当事者は孤独感や疎外感を感じやすく、仕事を続けたり、日常的な会話に参加したりするのが困難だといいます。
「ただ頷いて、理解しているふりをします。ときどき待ち合わせの時間を間違え、友達から『聞いてなかったの?』と言われます。そして、約束を守れない人だと思われて、疎遠になってしまうのです」と、添田さんはよくある事として打ち明けました。
添田さんは、今年初めから、株式会社アイシンが開発した音声認識アプリ「YYProbe」 を使い始めました。YYProbe は、聴覚に障碍がある人々のコミュニティで広く使われていますが、LiD/APD のある人にとっては、マイクロソフトの Azure OpenAI Service が提供する新しい生成 AI を活用した要約機能が特に役立ちます。
生成 AI ツールは、大量のデータを合成してテキスト、コード、画像などを生成する大規模言語モデル (LLM) を基盤として構築されています。そうしたツールは、テキストを生成するだけでなく、要約することも可能です。
たとえば、添田さんは、母親が新型コロナウイルス感染症で入院した際に、医師の話を理解するために YYProbe を使用しました。添田さんはタブレットで YYProbe を使って医師が話す内容を理解し、情報を要約して、文章化したものを妹に送りました。
「(文字を) 読む方がついて行きやすく、話が分かるようになります。それに、もし間違って聞き取っていても、読み直して確認できます」と添田さんは言います。
【画像:https://kyodonewsprwire.jp/img/202312043764-O2-PN6IRDx8】
キャプション: 実際のアプリ画面
アイシンの研究開発チーム は、当初、業務記録の作成を目的とした従業員用の音声文字化ツールとして YYProbe をコロナ禍に開発していました。ある時、社内の聴覚障碍のある従業員にアプリを使用してもらったところ、とても評判が良かったため、聴覚障碍者だけでなく、高齢者や外国人、その他コミュニケーションに困難を抱えているあらゆる人々が使用できるツールとして、YYProbe をはじめとする音声認識システム「YYSystem」の開発に乗り出しました。
アイシンがアプリの構築にマイクロソフトの Azure AI 音声 を採用した決め手は、「音声認識の精度が高いため」だと、研究開発チームを率いる中村正樹さんは説明します。マイクロソフトの Azure OpenAI Service を通して OpenAI の ChatGPT テクノロジを利用し、Azure AI 翻訳と組み合わせることで、要約機能と翻訳機能を実現しました。
YYSystem は、官公庁や小売店のカウンターに設置されたモニターでも運用されており、東京で開催されるデフリンピック 2025 では観客に利用される予定です。また、さまざまなコミュニティの活動や個人の生活でも活用されています。
現在、添田さんは、医師や同業界で働くメンバーを含むオンラインの LiD/APD 親支援グループを運営しており、たとえば、子供の学習支援として教室への機器の持ち込みを認めてもらうための活動等を行っています。
また、アプリ開発者とも協力しています。今年 5 月、添田さんの親支援グループはアイシンの研究開発オフィス を訪れ、開発者である中村さんとミーティングを行いました。中村さんは、ユーザーと継続的に連絡を取りながら、要望に応じて定期的に機能を追加しています。
添田さんの LiD/APD 親支援グループは、行間を広げて文章を短くすることや、発話者ごとに文字を違う色に変えることを提案し、その変更はアプリに反映されました。
中村さんによると、アプリは将来的に、テキストや音声だけでなく、画像、動画、グラフも入力や生成をして、コミュニケーションができるようになる予定とのことです。生成 AI によって、すでにそれが実現可能になっています。
元日テレアナ、44歳ビキニ姿に「スタイル抜群」ジンベエザメとGW満喫
玉川徹氏「バカにしていて…失敗した」楽曲をオンエア
山本由伸「すごくいいことかな」前田健太、今永昇太と日本人先発投手3人の同日勝利の快挙に
漫画家の浦沢直樹氏がフジコ・ヘミングさん追悼、「見事な歌声で作品を彩っていただいた」
辛坊治郎氏、若山耀人容疑者とその背後人物に言及「オレオレ詐欺と構造は似ている」
青汁王子、バイク事故のけがの経過を報告「指先がわずかに動き、かすかな希望が見えてきました」
岩田明子氏、大河子役・若山耀人容疑者の逮捕をオウム事件と重ね…当時「ヨガをやったから」と
巨人戸郷翔征-阪神門別啓人、広島アドゥワ誠-DeNA東克樹ほか/3日予告先発
巨人オコエ瑠偉、広島上本崇司、中日上林誠知、オリックス田嶋大樹ら抹消/2日公示
山本由伸が3勝目 打線は23歳ルーキーが37・5億円左腕撃ち 大谷翔平はベンチでモグモグ休養
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
今田美緒(23)ブレイク前の恥ずかしい映像が流出、けしからんと話題に
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
水原一平容疑者が胴元側に支払ったお金、カジノを通じ現金化されていた
元なでしこタレント、引退の仰天理由明かしスタジオ悲鳴 きっかけはXの投稿だった
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
蟹江敬三さん長男が子役・若山耀人容疑者の逮捕に嘆息「ここまでの転落人生は稀に見る悪例」
透け透けハイレグあまつまりな「目のやり場に困る…だがしっかり目に焼き付けさせてもらうっ 」
47歳元最年長グラドル“年とらない”超ミニ生美脚動画に騒然「たまらん」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
深夜のファミリーマート徘徊、必ず入っている「フエラムネのミニチュアおもちゃ付」を探し求めた結果……
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
小澤征悦と再婚した桑子真帆アナ(34)黒い過去が流出、衝撃の過去にネット騒然
大原櫻子、ガーシー暴露後初のSNS投稿に賛否の声「イメージ最悪になった」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
元日テレアナ、44歳ビキニ姿に「スタイル抜群」ジンベエザメとGW満喫
玉川徹氏「バカにしていて…失敗した」楽曲をオンエア
山本由伸「すごくいいことかな」前田健太、今永昇太と日本人先発投手3人の同日勝利の快挙に
漫画家の浦沢直樹氏がフジコ・ヘミングさん追悼、「見事な歌声で作品を彩っていただいた」
辛坊治郎氏、若山耀人容疑者とその背後人物に言及「オレオレ詐欺と構造は似ている」
青汁王子、バイク事故のけがの経過を報告「指先がわずかに動き、かすかな希望が見えてきました」
岩田明子氏、大河子役・若山耀人容疑者の逮捕をオウム事件と重ね…当時「ヨガをやったから」と
巨人戸郷翔征-阪神門別啓人、広島アドゥワ誠-DeNA東克樹ほか/3日予告先発
巨人オコエ瑠偉、広島上本崇司、中日上林誠知、オリックス田嶋大樹ら抹消/2日公示
山本由伸が3勝目 打線は23歳ルーキーが37・5億円左腕撃ち 大谷翔平はベンチでモグモグ休養