株式会社アイシンが生成 AI を活用し、聞き取りに困難のある人を支援
株式会社アイシンが開発した「YYSystem」は、音声を認識し、文字などに変換するアプリシリーズです。聴覚に障碍のある方をはじめ、コミュニケーションに困難を抱えるあらゆる人々に利用されていますが、特に 生成AIを活用したMicrosoft Azure OpenAI Service の要約機能が LiD/APD (聞き取り困難症/聴覚情報処理障碍) のある方々に役立っています。
ここでは、YYSystem がいかに LiD/APD のある方々の生活体験を向上させているかについて概要をお伝えします。
ストーリーの全文はこちらからご覧ください。
【画像:https://kyodonewsprwire.jp/img/202312043764-O1-361U5K6d】
キャプション: YYSystem のアプリを使って会話する様子
添田洋美さんは幼少の頃から人の話を聞き取ることが苦手でした。家庭内でも、換気扇の音や流水音などの生活音があると、子供たちの声を聞き取るのに苦労しました。医師による検査を受けても耳に異常は見つからず、耳で聞いた言葉を脳で処理することができない状態の「LiD/APD (聞き取り困難症/聴覚情報処理障害)」があると診断されたのは、わずか 3 年前のことでした。
LiD/APD は日本での認知度が低いため、当事者は孤独感や疎外感を感じやすく、仕事を続けたり、日常的な会話に参加したりするのが困難だといいます。
「ただ頷いて、理解しているふりをします。ときどき待ち合わせの時間を間違え、友達から『聞いてなかったの?』と言われます。そして、約束を守れない人だと思われて、疎遠になってしまうのです」と、添田さんはよくある事として打ち明けました。
添田さんは、今年初めから、株式会社アイシンが開発した音声認識アプリ「YYProbe」 を使い始めました。YYProbe は、聴覚に障碍がある人々のコミュニティで広く使われていますが、LiD/APD のある人にとっては、マイクロソフトの Azure OpenAI Service が提供する新しい生成 AI を活用した要約機能が特に役立ちます。
生成 AI ツールは、大量のデータを合成してテキスト、コード、画像などを生成する大規模言語モデル (LLM) を基盤として構築されています。そうしたツールは、テキストを生成するだけでなく、要約することも可能です。
たとえば、添田さんは、母親が新型コロナウイルス感染症で入院した際に、医師の話を理解するために YYProbe を使用しました。添田さんはタブレットで YYProbe を使って医師が話す内容を理解し、情報を要約して、文章化したものを妹に送りました。
「(文字を) 読む方がついて行きやすく、話が分かるようになります。それに、もし間違って聞き取っていても、読み直して確認できます」と添田さんは言います。
【画像:https://kyodonewsprwire.jp/img/202312043764-O2-PN6IRDx8】
キャプション: 実際のアプリ画面
アイシンの研究開発チーム は、当初、業務記録の作成を目的とした従業員用の音声文字化ツールとして YYProbe をコロナ禍に開発していました。ある時、社内の聴覚障碍のある従業員にアプリを使用してもらったところ、とても評判が良かったため、聴覚障碍者だけでなく、高齢者や外国人、その他コミュニケーションに困難を抱えているあらゆる人々が使用できるツールとして、YYProbe をはじめとする音声認識システム「YYSystem」の開発に乗り出しました。
アイシンがアプリの構築にマイクロソフトの Azure AI 音声 を採用した決め手は、「音声認識の精度が高いため」だと、研究開発チームを率いる中村正樹さんは説明します。マイクロソフトの Azure OpenAI Service を通して OpenAI の ChatGPT テクノロジを利用し、Azure AI 翻訳と組み合わせることで、要約機能と翻訳機能を実現しました。
YYSystem は、官公庁や小売店のカウンターに設置されたモニターでも運用されており、東京で開催されるデフリンピック 2025 では観客に利用される予定です。また、さまざまなコミュニティの活動や個人の生活でも活用されています。
現在、添田さんは、医師や同業界で働くメンバーを含むオンラインの LiD/APD 親支援グループを運営しており、たとえば、子供の学習支援として教室への機器の持ち込みを認めてもらうための活動等を行っています。
また、アプリ開発者とも協力しています。今年 5 月、添田さんの親支援グループはアイシンの研究開発オフィス を訪れ、開発者である中村さんとミーティングを行いました。中村さんは、ユーザーと継続的に連絡を取りながら、要望に応じて定期的に機能を追加しています。
添田さんの LiD/APD 親支援グループは、行間を広げて文章を短くすることや、発話者ごとに文字を違う色に変えることを提案し、その変更はアプリに反映されました。
中村さんによると、アプリは将来的に、テキストや音声だけでなく、画像、動画、グラフも入力や生成をして、コミュニケーションができるようになる予定とのことです。生成 AI によって、すでにそれが実現可能になっています。
野呂佳代、インスタで実父とのツーショット公開に「本物!?」ファンから驚きの声
小泉今日子、ファンクラブに入るほどハマっているアーティスト明かす「何この子たち!?」
「まる子」2代目ナレーター木村匡也「TARAKOさんに黙とうを」収録前のエピソード明かす
BCリーグで「リアル茂野吾郎」なプレー?元広島、楽天の福井優也がボールたたきつけ逆転許す
【日本代表】6月6日のW杯アジア2次予選ミャンマー戦は日本テレビ系での生中継に決定
「だれかtoなかい」75歳レジェンド俳優が40歳毒舌講談師と初対面 ムロツヨシ感心と激怒
堀江貴文氏、初「LCC」搭乗での違和感指摘「日よけ」問題「どっちが正しいの?」
中川翔子、免許更新を報告 結婚、改名へて「3種類名前が変わった免許証はレアな勲章」
キリン赤ちゃん誕生 すでに高さ175センチ 富士サファリパーク
【西武】高橋光成が好相性の敵地エスコンで今季初勝利へ 異例のブルペン“おかわり”で入念調整
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
73歳神田正輝「旅サラダ」生放送で“12歳下俳優”から呼び捨てされ激論
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
曙と熱愛した相原勇(52)の現在が衝撃的すぎると話題に
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
55歳森口博子「だっちゅーの」鮮やかビキニ姿披露にX歓喜「破壊力ハンパない」「スゴすぎ」
「ふてほど」25歳女優“薔薇ブラ”でポロリ寸前?過激衣装に「見えちゃう」「刺激強すぎ」
大物炎上系ユーチューバー”衝撃の預金残高”公開「すげぇ」「エグい」驚きの声
水原一平容疑者 最高刑「懲役33年」トレンド入り 「人生詰んだ」「稀代の詐欺師」の声
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
深夜のファミリーマート徘徊、必ず入っている「フエラムネのミニチュアおもちゃ付」を探し求めた結果……
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
小澤征悦と再婚した桑子真帆アナ(34)黒い過去が流出、衝撃の過去にネット騒然
ガーシー、佐野ひなこの暴露を示唆でネット騒然「ファンだったのに」
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
野呂佳代、インスタで実父とのツーショット公開に「本物!?」ファンから驚きの声
小泉今日子、ファンクラブに入るほどハマっているアーティスト明かす「何この子たち!?」
「まる子」2代目ナレーター木村匡也「TARAKOさんに黙とうを」収録前のエピソード明かす
BCリーグで「リアル茂野吾郎」なプレー?元広島、楽天の福井優也がボールたたきつけ逆転許す
【日本代表】6月6日のW杯アジア2次予選ミャンマー戦は日本テレビ系での生中継に決定
堀江貴文氏、初「LCC」搭乗での違和感指摘「日よけ」問題「どっちが正しいの?」
中川翔子、免許更新を報告 結婚、改名へて「3種類名前が変わった免許証はレアな勲章」
「だれかtoなかい」75歳レジェンド俳優が40歳毒舌講談師と初対面 ムロツヨシ感心と激怒
キリン赤ちゃん誕生 すでに高さ175センチ 富士サファリパーク
【西武】高橋光成が好相性の敵地エスコンで今季初勝利へ 異例のブルペン“おかわり”で入念調整