東京工芸大学の村井亮太さんが手話認識の新技術を発表、その影響と未来に迫る

村井亮太さんと「ub-MOJI」プロジェクト

東京工芸大学工学研究科の村井亮太さんが開発した、日本語手話の指文字データベース「ub-MOJI」が話題を呼んでいます。このデータベースは、聴覚障害者にとって重要なコミュニケーション手段である日本語手話の指文字をコンピュータが自動で認識し、理解できるようにすることを目的としています。彼の研究は2025年から無料で公開される予定です。

「ub-MOJI」は、深層学習を活用した手話認識技術の進展を促進するものであり、特に手話動作の高精度な認識を実現するための基礎データを提供します。村井さんは、このプロジェクトを通じて、技術向上と聴覚障害者のコミュニケーション環境の改善を目指しています。

手話認識の技術的課題と取り組み

手話の特徴的な部分の一つは、個人差が大きいことです。これまでは、正確に手話動作を特定するために膨大な注釈が必要とされていました。村井さんは、「点レベル注釈」を活用し、一瞬の動作を特定することで、従来の手法に比べて情報量を大幅に削減し、効率的かつ高精度な手話認識モデルの構築を可能にしました。この革新的なアプローチが、今後の手話認識研究に大きな影響を与えるでしょう。

協力を通じたデータ収集

村井さんの手話認識研究は、地域の手話サークルと密に連携を取りながら進められています。芸術学部の映像情報研究室の学生たちが、様々な手話動作を高解像度カメラで撮影し、それを基に村井さんがデータの解析を行うことで、手話動作の認識精度を向上させています。この作業は、手話に対する理解を深め、個人差による動作の違いを適切に処理するための重要なステップとなっています。

新しいバージョンへの期待

2023年9月23日の「手話言語の国際デー」に合わせて、さらなる機能強化が予定されています。具体的には、基本音節データセットに濁音や長音などのデータを追加し、データセットのバージョンアップが図られます。この変更により、より多くの手話表現に対応できるようになるでしょう。

村井さんは、このデータベースの公開を通じて、聴覚障害者のコミュニケーション手段への理解を広め、手話通訳支援システムや教育ツール、リアルタイム翻訳システムなど、様々な応用が期待されると述べています。これにより、インクルーシブな社会の実現にも寄与する可能性があります。

今後の展望と未来への挑戦

村井さんは今後、地域の手話サークルと協力し、より多様な手話データを集めることで、認識の精度向上を目指す意向を示しています。加えて、手話認識研究に大規模言語モデルを取り入れることで、より自然で文脈に即した解釈を行う試みにも挑戦したいと語っています。

2026年には、東京工芸大学の工学部が通学とオンデマンド授業を組み合わせた『つうおん』スタイルを導入予定であり、これにより学生はより柔軟に学べる環境が整います。これにより、社会課題に取り組みながら学びを深めることができるチャンスが増えるでしょう。