聴覚障害者にとって、電車での移動はギャンブルのようなものです。平均的な日は何の問題もなく、目的地に向かう電車に乗り、仕事を続けます。

しかし、ほとんどのアップデートは音声アナウンスによってのみ配信されるため、何か異常なことが起こると、状況はすぐに恐ろしいものになる可能性があります。聴覚障害者の旅行者は、電車が別のホームに移動したために乗り遅れたり、今日は電車が停車していないために駅がビュンビュンと過ぎていくのを眺めたりするかもしれません。また、緊急事態が発生した場合、他の全員が避難した後も車両内に残り、駅員に救出されなければならない場合もあります。

これらの例の一つ一つが描かれていますシドニーの聴覚障害者の実体験から。しかし、同僚と私は、シドニートレインやオーストラリアの聴覚障害者コミュニティのメンバーと協力して、先進的なシステムを開発しています。人工知能(AI) を利用した署名アバター音声アナウンスを自動的にオースラン語に翻訳できます。

アバターに関する私たちの取り組みは、オースランを「理解」できる AI システムの開発という次のステップにも向けて進められています。

旅は必ずしも計画通りに進むとは限りません

今年の初めに、同僚と私は走りましたパイロット研究シドニーの聴覚障害者の鉄道旅行者 3 名と。列車旅行中に何が起こるかについて彼らが共有した話だけでなく、彼らが旅行をスムーズに進めるために実証済みの戦略を使用していることがわかりました。

彼らの戦略は、定期的に通勤する人にはよく知られているかもしれません。たとえば、アプリで旅行の計画を立て、早めに到着し、何か変化があれば知らせてくれる標識を探します。

しかし彼らはまた、情報スクリーンの近くに立って最新情報を監視し、状況が変化した場合には駅員や他の乗客に情報を求める必要があるとも感じたと述べた。彼らはまた、電車に乗っている間は、停車駅に乗り遅れないように注意して、極度に警戒していると報告した。

しかし、これらの戦略は、聴覚障害のある旅行者が緊急事態を含む重要な情報を常に確実に受け取れるとは限りませんでした。たとえば、駅員は通常は親切ですが、忙しすぎて対応できない場合があります。

最大のフラストレーションは、他の乗客が情報を提供しようとしない、または提供することができず、聴覚障害者の旅行者が単に「群衆に従う」ことになった状況で起こりました。これは多くの場合、間違った場所に行き着くことを意味していました。

署名アバターの開発

Speech-to-Text ソフトウェアは、これらの問題のいくつかに対する簡単な解決策のように思えるかもしれません。しかし、多くのろう者にとって英語は自分のものではありません。母国語Auslan ははるかに簡単かつ迅速に処理できます。

聴覚障害者の旅行者は、完璧な世界では生の通訳が欲しいと私たちに言いました。しかし、プラットフォームや電車の画面に表示される署名アバターを使用した AI を活用した自動翻訳は、音声アナウンス内のキーワードを識別し、正しいオーストラリア語文法で文を生成し、語彙ライブラリから対応する記号をつなぎ合わせることができるため、魅力的でした。いくつかの理由があります。

まず、既知の語彙を使用するアナウンスのリアルタイム翻訳が可能です。これは、多くのアナウンスが同様のトピックを扱っている電車や駅のコンテキストに関連しています。

第 2 に、アバターとその署名は、画面の位置に関する情報を使用して、出口や他のプラットフォームを指し示しながらアバターが正しい方向に署名できるようにするなど、特定の状況のニーズに合わせてカスタマイズできます。

第三に、複数の署名者がアバターの語彙に署名を提供でき、それらをスムーズにつなぎ合わせて文を作成できます。

そして重要なのは、アバターを使用すると、組織が自動的に生成するアナウンスの「顔」になる必要があるのは現実の人間ではないということです。オーストラリアの聴覚障害者コミュニティは小規模で緊密な組織であり、翻訳に何か問題があったとしても誰も評判を傷つけないため、これは特に重要です。

技術的な観点から見ると、アバターを使用すると、署名の品質の最低基準を確保することもできます。私たちはモーション キャプチャを使用して、語彙ライブラリ内の各記号が正確で、動きが明確であることを確認しています。

また、「不気味の谷」、つまり人間らしいが微妙に間違っているものが不安を引き起こす影響を避けるのにも役立ちます。最近 AI によって生成された、指がたくさんある怪物のようなものは望んでいません。

AIをすべての人に

この作業は、オースランを理解できる AI システムを作成するという私たちの広範な目標の 1 つのステップです。この AI は、聴覚障害者と健聴者の駅員の会話を支援したり、聴覚障害者が電車での移動やその他の日常業務に関する情報をオースランでオンデマンドで入手できるようにする「チャットボット ブース」やアプリベースのアシスタントの作成に使用できる可能性があります。

世界中の手話とろう文化には、聴覚の研究者や AI 開発者にとって微妙なニュアンスや複雑さがあり、気づいていないかもしれない。これらの微妙な違いや複雑さを新しいテクノロジーに組み込む必要があり、研究者や開発者は AI データの収集と設計に対して言語優先のアプローチを取る必要があります。と聴覚障害者だけではありません。

そうして初めて、AI は聴覚障害者の真のニーズ、つまり日常生活のあらゆる面で安全と自立を確保するというニーズを満たすことができるのです。

この記事はから転載されています会話クリエイティブ・コモンズ・ライセンスに基づいて。読んでください元の記事。