株式会社アイシンが生成 AI を活用し、聞き取りに困難のある人を支援
株式会社アイシンが開発した「YYSystem」は、音声を認識し、文字などに変換するアプリシリーズです。聴覚に障碍のある方をはじめ、コミュニケーションに困難を抱えるあらゆる人々に利用されていますが、特に 生成AIを活用したMicrosoft Azure OpenAI Service の要約機能が LiD/APD (聞き取り困難症/聴覚情報処理障碍) のある方々に役立っています。
ここでは、YYSystem がいかに LiD/APD のある方々の生活体験を向上させているかについて概要をお伝えします。
ストーリーの全文はこちらからご覧ください。
【画像:https://kyodonewsprwire.jp/img/202312043764-O1-361U5K6d】
キャプション: YYSystem のアプリを使って会話する様子
添田洋美さんは幼少の頃から人の話を聞き取ることが苦手でした。家庭内でも、換気扇の音や流水音などの生活音があると、子供たちの声を聞き取るのに苦労しました。医師による検査を受けても耳に異常は見つからず、耳で聞いた言葉を脳で処理することができない状態の「LiD/APD (聞き取り困難症/聴覚情報処理障害)」があると診断されたのは、わずか 3 年前のことでした。
LiD/APD は日本での認知度が低いため、当事者は孤独感や疎外感を感じやすく、仕事を続けたり、日常的な会話に参加したりするのが困難だといいます。
「ただ頷いて、理解しているふりをします。ときどき待ち合わせの時間を間違え、友達から『聞いてなかったの?』と言われます。そして、約束を守れない人だと思われて、疎遠になってしまうのです」と、添田さんはよくある事として打ち明けました。
添田さんは、今年初めから、株式会社アイシンが開発した音声認識アプリ「YYProbe」 を使い始めました。YYProbe は、聴覚に障碍がある人々のコミュニティで広く使われていますが、LiD/APD のある人にとっては、マイクロソフトの Azure OpenAI Service が提供する新しい生成 AI を活用した要約機能が特に役立ちます。
生成 AI ツールは、大量のデータを合成してテキスト、コード、画像などを生成する大規模言語モデル (LLM) を基盤として構築されています。そうしたツールは、テキストを生成するだけでなく、要約することも可能です。
たとえば、添田さんは、母親が新型コロナウイルス感染症で入院した際に、医師の話を理解するために YYProbe を使用しました。添田さんはタブレットで YYProbe を使って医師が話す内容を理解し、情報を要約して、文章化したものを妹に送りました。
「(文字を) 読む方がついて行きやすく、話が分かるようになります。それに、もし間違って聞き取っていても、読み直して確認できます」と添田さんは言います。
【画像:https://kyodonewsprwire.jp/img/202312043764-O2-PN6IRDx8】
キャプション: 実際のアプリ画面
アイシンの研究開発チーム は、当初、業務記録の作成を目的とした従業員用の音声文字化ツールとして YYProbe をコロナ禍に開発していました。ある時、社内の聴覚障碍のある従業員にアプリを使用してもらったところ、とても評判が良かったため、聴覚障碍者だけでなく、高齢者や外国人、その他コミュニケーションに困難を抱えているあらゆる人々が使用できるツールとして、YYProbe をはじめとする音声認識システム「YYSystem」の開発に乗り出しました。
アイシンがアプリの構築にマイクロソフトの Azure AI 音声 を採用した決め手は、「音声認識の精度が高いため」だと、研究開発チームを率いる中村正樹さんは説明します。マイクロソフトの Azure OpenAI Service を通して OpenAI の ChatGPT テクノロジを利用し、Azure AI 翻訳と組み合わせることで、要約機能と翻訳機能を実現しました。
YYSystem は、官公庁や小売店のカウンターに設置されたモニターでも運用されており、東京で開催されるデフリンピック 2025 では観客に利用される予定です。また、さまざまなコミュニティの活動や個人の生活でも活用されています。
現在、添田さんは、医師や同業界で働くメンバーを含むオンラインの LiD/APD 親支援グループを運営しており、たとえば、子供の学習支援として教室への機器の持ち込みを認めてもらうための活動等を行っています。
また、アプリ開発者とも協力しています。今年 5 月、添田さんの親支援グループはアイシンの研究開発オフィス を訪れ、開発者である中村さんとミーティングを行いました。中村さんは、ユーザーと継続的に連絡を取りながら、要望に応じて定期的に機能を追加しています。
添田さんの LiD/APD 親支援グループは、行間を広げて文章を短くすることや、発話者ごとに文字を違う色に変えることを提案し、その変更はアプリに反映されました。
中村さんによると、アプリは将来的に、テキストや音声だけでなく、画像、動画、グラフも入力や生成をして、コミュニケーションができるようになる予定とのことです。生成 AI によって、すでにそれが実現可能になっています。
「逮捕しちゃうぞ!って言って下さい」元警察官女優・田中杏樹、愛車パッソとの敬礼ショット公開
「北斗さんがお義母さんて羨ましすぎる」北斗晶、長男夫婦との仲良しスリーショット公開
3児の母小倉優子、11歳長男が母の日にカップケーキを手作り「可愛い子達に囲まれて幸せだぁ」
【阪神】桐敷拓馬、15日中日戦から1軍に再合流「発熱前には戻ってきているかなと」
【楽天】則本昂大8セーブ目「今日みたいな試合運びを毎試合できるように」
米人気番組で決勝進出“謎の制服おかっぱ集団”「アバンギャルディ」が全国ツアー、紅白も出演
「奈良県3村応援旅行割」5月17日正午開始 最大8千円分お得な旅行支援
テレ東・池谷実悠アナ「寒すぎ」ジャケット姿の“ぷく顔”ショットに反響「やばいキュン死する」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
高岡早紀「10代の頃にボーイフレンドが…」ボブ・マーリー映画イベントでレゲエ愛語る
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
73歳神田正輝「旅サラダ」生放送で“12歳下俳優”から呼び捨てされ激論
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
時代劇の常識を覆す!仇討ち・無礼討ちの厳格なルール
曙と熱愛した相原勇(52)の現在が衝撃的すぎると話題に
55歳森口博子「だっちゅーの」鮮やかビキニ姿披露にX歓喜「破壊力ハンパない」「スゴすぎ」
「ふてほど」25歳女優“薔薇ブラ”でポロリ寸前?過激衣装に「見えちゃう」「刺激強すぎ」
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
深夜のファミリーマート徘徊、必ず入っている「フエラムネのミニチュアおもちゃ付」を探し求めた結果……
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
完全にダマされた! 『ラヴィット!』あのちゃん“事故レベル”大暴走は『水ダウ』遠隔操作のしわざだった ネットも納得
ガーシー、またも綾野剛の暴露写真でネット歓喜「この写真見て笑っちゃう」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
小澤征悦と再婚した桑子真帆アナ(34)黒い過去が流出、衝撃の過去にネット騒然
ヒカル、浮気相手とのLINE流出にドン引きの声「キモすぎる」「吐きそう」
ガーシー、佐野ひなこの暴露を示唆でネット騒然「ファンだったのに」
「逮捕しちゃうぞ!って言って下さい」元警察官女優・田中杏樹、愛車パッソとの敬礼ショット公開
「北斗さんがお義母さんて羨ましすぎる」北斗晶、長男夫婦との仲良しスリーショット公開
3児の母小倉優子、11歳長男が母の日にカップケーキを手作り「可愛い子達に囲まれて幸せだぁ」
【阪神】桐敷拓馬、15日中日戦から1軍に再合流「発熱前には戻ってきているかなと」
米人気番組で決勝進出“謎の制服おかっぱ集団”「アバンギャルディ」が全国ツアー、紅白も出演
【楽天】則本昂大8セーブ目「今日みたいな試合運びを毎試合できるように」
「奈良県3村応援旅行割」5月17日正午開始 最大8千円分お得な旅行支援
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
テレ東・池谷実悠アナ「寒すぎ」ジャケット姿の“ぷく顔”ショットに反響「やばいキュン死する」
高岡早紀「10代の頃にボーイフレンドが…」ボブ・マーリー映画イベントでレゲエ愛語る