株式会社アイシンが生成 AI を活用し、聞き取りに困難のある人を支援
株式会社アイシンが開発した「YYSystem」は、音声を認識し、文字などに変換するアプリシリーズです。聴覚に障碍のある方をはじめ、コミュニケーションに困難を抱えるあらゆる人々に利用されていますが、特に 生成AIを活用したMicrosoft Azure OpenAI Service の要約機能が LiD/APD (聞き取り困難症/聴覚情報処理障碍) のある方々に役立っています。
ここでは、YYSystem がいかに LiD/APD のある方々の生活体験を向上させているかについて概要をお伝えします。
ストーリーの全文はこちらからご覧ください。
【画像:https://kyodonewsprwire.jp/img/202312043764-O1-361U5K6d】
キャプション: YYSystem のアプリを使って会話する様子
添田洋美さんは幼少の頃から人の話を聞き取ることが苦手でした。家庭内でも、換気扇の音や流水音などの生活音があると、子供たちの声を聞き取るのに苦労しました。医師による検査を受けても耳に異常は見つからず、耳で聞いた言葉を脳で処理することができない状態の「LiD/APD (聞き取り困難症/聴覚情報処理障害)」があると診断されたのは、わずか 3 年前のことでした。
LiD/APD は日本での認知度が低いため、当事者は孤独感や疎外感を感じやすく、仕事を続けたり、日常的な会話に参加したりするのが困難だといいます。
「ただ頷いて、理解しているふりをします。ときどき待ち合わせの時間を間違え、友達から『聞いてなかったの?』と言われます。そして、約束を守れない人だと思われて、疎遠になってしまうのです」と、添田さんはよくある事として打ち明けました。
添田さんは、今年初めから、株式会社アイシンが開発した音声認識アプリ「YYProbe」 を使い始めました。YYProbe は、聴覚に障碍がある人々のコミュニティで広く使われていますが、LiD/APD のある人にとっては、マイクロソフトの Azure OpenAI Service が提供する新しい生成 AI を活用した要約機能が特に役立ちます。
生成 AI ツールは、大量のデータを合成してテキスト、コード、画像などを生成する大規模言語モデル (LLM) を基盤として構築されています。そうしたツールは、テキストを生成するだけでなく、要約することも可能です。
たとえば、添田さんは、母親が新型コロナウイルス感染症で入院した際に、医師の話を理解するために YYProbe を使用しました。添田さんはタブレットで YYProbe を使って医師が話す内容を理解し、情報を要約して、文章化したものを妹に送りました。
「(文字を) 読む方がついて行きやすく、話が分かるようになります。それに、もし間違って聞き取っていても、読み直して確認できます」と添田さんは言います。
【画像:https://kyodonewsprwire.jp/img/202312043764-O2-PN6IRDx8】
キャプション: 実際のアプリ画面
アイシンの研究開発チーム は、当初、業務記録の作成を目的とした従業員用の音声文字化ツールとして YYProbe をコロナ禍に開発していました。ある時、社内の聴覚障碍のある従業員にアプリを使用してもらったところ、とても評判が良かったため、聴覚障碍者だけでなく、高齢者や外国人、その他コミュニケーションに困難を抱えているあらゆる人々が使用できるツールとして、YYProbe をはじめとする音声認識システム「YYSystem」の開発に乗り出しました。
アイシンがアプリの構築にマイクロソフトの Azure AI 音声 を採用した決め手は、「音声認識の精度が高いため」だと、研究開発チームを率いる中村正樹さんは説明します。マイクロソフトの Azure OpenAI Service を通して OpenAI の ChatGPT テクノロジを利用し、Azure AI 翻訳と組み合わせることで、要約機能と翻訳機能を実現しました。
YYSystem は、官公庁や小売店のカウンターに設置されたモニターでも運用されており、東京で開催されるデフリンピック 2025 では観客に利用される予定です。また、さまざまなコミュニティの活動や個人の生活でも活用されています。
現在、添田さんは、医師や同業界で働くメンバーを含むオンラインの LiD/APD 親支援グループを運営しており、たとえば、子供の学習支援として教室への機器の持ち込みを認めてもらうための活動等を行っています。
また、アプリ開発者とも協力しています。今年 5 月、添田さんの親支援グループはアイシンの研究開発オフィス を訪れ、開発者である中村さんとミーティングを行いました。中村さんは、ユーザーと継続的に連絡を取りながら、要望に応じて定期的に機能を追加しています。
添田さんの LiD/APD 親支援グループは、行間を広げて文章を短くすることや、発話者ごとに文字を違う色に変えることを提案し、その変更はアプリに反映されました。
中村さんによると、アプリは将来的に、テキストや音声だけでなく、画像、動画、グラフも入力や生成をして、コミュニケーションができるようになる予定とのことです。生成 AI によって、すでにそれが実現可能になっています。
62歳俳優「今もまだ受け止められません」相棒死去の悲しみ癒えず、配信番組は無期限休止
カブス今永昇太、反省の弁「これからは本物の実力を試される」5回途中5失点で降板
コロナワクチン接種が死因、人口動態で初計上 23年は37人
「笑っていいとも!」元レギュラーのカリスマモデル、誕生日迎えたことを報告「永遠の憧れ」の声
「孤独のグルメ」久住昌之さんが父死去を報告 過去の著書に登場「控えめに言って爆笑です」
恵俊彰が2日連続で欠席 MC務める「ひるおび」は八代英輝弁護士がこの日も代役で進行
JR東海道線の電車内に刃物を持った男性 川崎駅で現行犯逮捕
【広島】関大・金丸夢斗ら20 人の映像確認 明大・宗山塁に「素晴らしい選手」スカウト会議
粗品、人気タレントらのXフォロー解除「あのちゃんだけにしてもええぐらい」
破った書類を公用文書と思い込み… 大阪府警が男性を誤認逮捕
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
柏原崇(45)現在を調べてみた結果、相変わらずかっこよすぎた!
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
YouTuberジュキヤの動画企画が大炎上「普通に痴漢」「気持ち悪すぎ」
浜崎あゆみ、子供の写真公開に疑いの声止まず「よそのお宅の子供?」
大谷翔平被弾投手が悪態ついて退場処分!次打者フリーマンと対戦中に判定巡り塁審と口論
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
62歳俳優「今もまだ受け止められません」相棒死去の悲しみ癒えず、配信番組は無期限休止
千原せいじのシエラレオネ巡る発言 NPO代表理事が公式謝罪忠告「最悪、国家間の問題に発展」
大谷翔平10試合ぶり14号 シティフィールド初アーチ、26球場目は自らの日本人記録更新
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
柏原崇(45)現在を調べてみた結果、相変わらずかっこよすぎた!
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
TikTokを賑わす「フエラムネごめんなサイダー味」がセブンイレブンで再販!じゅるるマスカットも買うなら今!
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
小倉優子、不自然な“二重ライン”にネット騒然「やっぱり整形?」
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
浜崎あゆみ、子供の写真公開に疑いの声止まず「よそのお宅の子供?」
62歳俳優「今もまだ受け止められません」相棒死去の悲しみ癒えず、配信番組は無期限休止
カブス今永昇太、反省の弁「これからは本物の実力を試される」5回途中5失点で降板
コロナワクチン接種が死因、人口動態で初計上 23年は37人
「笑っていいとも!」元レギュラーのカリスマモデル、誕生日迎えたことを報告「永遠の憧れ」の声
「孤独のグルメ」久住昌之さんが父死去を報告 過去の著書に登場「控えめに言って爆笑です」
恵俊彰が2日連続で欠席 MC務める「ひるおび」は八代英輝弁護士がこの日も代役で進行
JR東海道線の電車内に刃物を持った男性 川崎駅で現行犯逮捕
【広島】関大・金丸夢斗ら20 人の映像確認 明大・宗山塁に「素晴らしい選手」スカウト会議
粗品、人気タレントらのXフォロー解除「あのちゃんだけにしてもええぐらい」
破った書類を公用文書と思い込み… 大阪府警が男性を誤認逮捕