【Signapse AI】音声やテキストを手話に自動翻訳

引用：https://www.f6s.com/company/signapse#about

WHO(世界保健機構)は、現在難聴に苛まれている人が4.3億人(世界人口の約5％)存在し、2050年までに7億人以上に増加すると予測している。

またWFD(世界ろう連盟)によると、日常的に手話を使用するろう者は世界中に7000万人以上存在し、300種類以上の異なる手話が利用されているそう。

このように身近に聴覚障害者が存在するにもかかわらず、聴者が大多数を占める現代においては、その存在は「見えない化」されている。SDGsの目標3「全ての人に健康と福祉を」・目標10「人や国の不平等をなくそう」と謳われているように、彼らが生きやすい社会をつくっていく義務が私たちにはあるだろう。

この課題に対して、イギリスのスタートアップSignapse AIは、テキストや動画、WEBサイトの情報から即座に手話のビデオを作成するサービスを提供している。

新たなサービスのローンチも発表して注目を集めるSignapse AIについて紹介しよう。

事業内容：生成AIを用いた手話翻訳ソフトウェアの提供
1. AI技術「GAN」を活用して高解像度の動画を生成
2. 2024年9月からビデオ翻訳プラットフォームをローンチ予定
資金調達：シードラウンドにて約4億円を獲得
企業概要
まとめ

事業内容：生成AIを用いた手話翻訳ソフトウェアの提供

Signapse AIの事業内容は、生成AIを用いた手話翻訳ソフトウェアの開発・販売だ。ウェブサイトや動画、交通機関の音声アナウンスを、BSL(イギリス手話)またはASL(アメリカ手話)に翻訳し、わずか2秒で手話のビデオを自動生成する。

従来の技術でよく見られる簡素化されたアバターとは異なり、実際の人間が手話をしているような、自然でリアルな動画を生成するのが大きな特徴だ。またAPI連携が可能なため、最新のスマホやパソコンはもちろん、交通機関に存在する古いディスプレイにも対応可能で、活用できる範囲が非常に広い。

加えて同社は緊急時の対応も優れており、状況の変化や予期せぬ混乱に備えて、手話通訳チームが待機している。必要な際には手話情報をカスタマイズし、1時間以内に動画をアップロードできるようにしているそうだ。

現在はイギリスにて毎日5000以上の電車のアナウンスを手話動画に翻訳しているほか、アメリカの空港を中心に50以上もの航空会社で利用されている。手話は世界共通言語でなく、各国で異なるため、今後は世界各国の手話に対応してくれることを期待しよう。

アメリカのシンシナティ・ノーザンケンタッキー国際空港でSignapse AIが活躍する様子

AI技術「GAN」を活用して高解像度の動画を生成

引用：https://ai-kenkyujo.com/artificial-intelligence/algorithm/gan/

Signapseで使用しているAI技術は、「敵対的生成ネットワーク(Generative Adversarial Networks：GAN)」と呼ばれるもの。

GANは、生成ネットワーク(Generator)と、識別ネットワーク(Discriminator)の2つから構成される。Generatorは本物のデータをもとに偽のデータを作り出し、Discriminatorはその偽のデータと本物のデータを比較して本物か偽物かを判定する。この一連のプロセスを繰り返し、学習を深めていくことで、「本物と見分けがつかない偽物」を生成するのだ。