청각 장애인에게 기차 여행은 도박이 될 수 있습니다.보통 날에는 아무 일도 일어나지 않습니다. 그들은 목적지까지 기차를 타고 사업을 계속합니다.

그러나 평범하지 않은 일이 발생하면 상황은 금세 무서워질 수 있습니다. 대부분의 업데이트는 오디오 안내로만 전달되기 때문입니다.청각 장애가 있는 여행자는 기차가 다른 플랫폼으로 이동했기 때문에 기차를 놓칠 수도 있고, 오늘 기차가 거기에 정차하지 않아서 역이 윙윙거리는 것을 지켜볼 수도 있습니다.또한 다른 사람들이 모두 대피한 후에도 비상 상황이 발생하면 기차 객차에 남아 있을 수 있으며 역 직원에 의해 구조되어야 합니다.

이 예들은 하나하나그려졌다시드니 청각 장애인들의 실제 경험을 바탕으로 제작되었습니다.하지만 제 동료들과 저는 Sydney Trains 및 Australian Deaf 커뮤니티 회원들과 협력하여 고급 기술을 개발하고 있습니다.인공지능(AI) 기반 서명화신오디오 공지사항을 자동으로 Auslan으로 번역할 수 있습니다.

아바타에 대한 우리의 작업은 다음 단계인 Auslan을 "이해"할 수 있는 AI 시스템 개발을 향해 나아가고 있습니다.

여행이 항상 계획대로 진행되는 것은 아닙니다

올해 초 동료들과 저는예비 연구시드니에서 세 명의 청각 장애인 기차 여행자와 함께.기차 여행 중 발생할 수 있는 일에 대해 그들이 공유한 이야기뿐만 아니라, 우리는 그들이 여행을 순조롭게 진행하기 위해 시도되고 테스트된 전략을 사용한다는 것을 알게 되었습니다.

그들의 전략은 일반 통근자들에게는 익숙할 것입니다.예를 들어, 그들은 앱을 사용하여 여행을 계획하고 일찍 도착하여 변경된 사항이 있는지 알려주는 표지판을 찾습니다.

그러나 그들은 또한 최신 정보를 확인하기 위해 정보 화면 근처에 서서 상황이 바뀌었을 때 역 직원이나 다른 승객에게 정보를 요청해야 한다고 느꼈습니다.그들은 또한 기차에 있는 동안 정류장을 놓치지 않도록 주의 깊게 관찰했다고 보고했습니다.

그러나 이러한 전략이 청각 장애 여행자가 긴급 상황을 포함한 중요한 정보를 항상 받을 수 있도록 보장하는 것은 아닙니다.예를 들어, 일반적으로 역 직원은 도움을 주지만 때로는 너무 바빠서 도움을 줄 수 없는 경우도 있습니다.

가장 큰 좌절감은 다른 승객들이 정보를 제공할 의향이 없거나 정보를 제공할 수 없는 상황에서 발생했으며, 청각 장애가 있는 여행자는 단지 "군중을 따라"야 했습니다.이것은 종종 잘못된 장소에서 끝나는 것을 의미했습니다.

서명 아바타 개발

음성-텍스트 소프트웨어는 이러한 문제 중 일부에 대한 쉬운 해결책처럼 보일 수 있습니다.그러나 많은 청각 장애인들에게 영어는 그들의 언어가 아닙니다.모국어Auslan은 훨씬 더 쉽고 빠르게 처리될 수 있습니다.

청각 장애인 여행자들은 완벽한 세상에서는 실시간 통역사를 원할 것이라고 말했습니다.그러나 플랫폼이나 기차 화면에 표시되는 서명 아바타를 사용한 자동 AI 기반 번역은 오디오 안내의 핵심 단어를 식별하고 올바른 Auslan 문법으로 문장을 생성하며 어휘 라이브러리에서 해당 기호를 연결하는 것이 매력적이었습니다.여러 가지 이유.

첫째, 유사한 주제를 다루는 많은 공지 사항이 있는 기차 및 역 상황과 관련된 알려진 어휘를 사용하는 공지 사항을 실시간으로 번역할 수 있습니다.

둘째, 아바타와 그 서명은 화면 위치에 대한 정보를 사용하여 아바타가 출구나 다른 플랫폼을 가리키는 동안 올바른 방향으로 서명하도록 하는 등 주어진 상황의 요구 사항에 맞게 사용자 정의할 수 있습니다.

셋째, 여러 서명자가 아바타의 어휘에 기호를 추가할 수 있으며, 그런 다음 이를 원활하게 연결하여 문장을 만들 수 있습니다.

그리고 중요한 것은 아바타는 실제 사람이 조직에서 자동으로 생성된 공지의 "얼굴"이 될 필요가 없다는 것을 의미합니다.호주 청각 장애인 커뮤니티는 규모가 작고 긴밀하게 연결되어 있으며, 번역에 문제가 있어도 누구도 평판에 손상을 입지 않기 때문에 이는 특히 중요합니다.

기술적인 관점에서 볼 때 아바타를 사용하면 서명을 위한 최소 품질 기준을 보장할 수도 있습니다.우리는 어휘 라이브러리의 각 기호가 정확하고 움직임이 명확한지 확인하기 위해 모션 캡처를 사용하고 있습니다.

또한 인간과 유사하지만 미묘하게 잘못된 것이 불안을 일으키는 효과인 '불쾌한 계곡'을 피하는 데 도움이 됩니다.우리는 최근 AI에 의해 생성된 손가락이 많은 괴물을 원하지 않습니다.

모두를 위한 AI

이 작업은 Auslan을 이해할 수 있는 AI 시스템을 만드는 우리의 더 넓은 목표의 한 단계입니다.이 AI는 청각 장애인과 청각 스테이션 직원의 대화를 돕거나 청각 장애인이 기차 여행이나 기타 일상 업무에 대해 Auslan에서 필요할 때 정보를 얻을 수 있는 "챗봇 부스" 또는 앱 기반 보조자를 만드는 데 사용될 수 있습니다.

전 세계의 수화와 청각 장애인 문화에는 AI 연구자와 개발자가 듣는 뉘앙스와 복잡성이 있습니다.인지하지 못할 수도 있다.이러한 뉘앙스와 복잡성은 새로운 기술에 포함되어야 하며, 연구자와 개발자는 AI 데이터 수집 및 설계에 대해 언어 우선 접근 방식을 취해야 합니다.~와 함께청각 장애인만을 위한 것이 아닙니다.

그래야만 AI가 청각 장애인의 실제 요구 사항, 즉 일상 생활의 모든 측면에서 안전과 독립성을 보장하는 것을 충족할 수 있습니다.

이 기사는 다음에서 재출판되었습니다.대화크리에이티브 커먼즈 라이센스에 따라.읽기원본 기사.