product

【便利】手話をリアルタイムで音声に変換するスマート手袋が開発される! (2/2)

2020.07.02 Thursday

前ページ手話翻訳の難しさ

<

1

2

>

アメリカ手話を翻訳できる「スマート手袋」

画像
Credit:UCLA

新しく開発された翻訳手袋には、5本の指にそれぞれ対応する伸縮性の薄いセンサーが取り付けられています。

これらのセンサーは導電性の糸で作られており、個々のアルファベット、数字、単語、フレーズに対応した手と指の動きを検出できます。

検出された情報は手首部分に装着された1ドル硬貨サイズの回路基板に伝わり、信号をスマートフォンのアプリへと送信します。スマートフォンでは1秒当たり約1ワードの速度で音声変換可能。

また、これらの手袋に加えて、顔にセンサーを追加(眉間と片方の口角)することで表情をキャプチャーすることもできます。

画像
Credit:UCLA

チェン氏によると、これまでにもアメリカ手話の装着型翻訳システムは存在していたようです。ただし、デバイス自体が重く装着も困難でした。

今回開発されたスマート手袋は、軽量かつ安価であり、耐久性の高い伸縮性ポリマーでできています。電子センサーも柔らかいため、良好な装着感を実現できています。

またコンピュータ学習により、現在のシステムはアルファベットの各文字と、0~9を含む660のジェスチャーを認識可能。

UCLAの研究者たちは、現在この技術を特許申請中です。商用モデルも考案されており、そのためには、語彙を追加し翻訳時間を短縮する必要があるとのこと。

一般化するなら、手軽にアメリカ手話使用者とコミュニケーションが取れるようになるでしょう。

この研究は6月29日、「Nature electronics」に掲載されました。

Sign-to-speech translation using machine-learning-assisted stretchable sensor arrays
https://www.nature.com/articles/s41928-020-0428-6

自動翻訳でスピーチできる「等身大ホログラム」をマイクロソフトが開発

reference: techxplore / written by ナゾロジー編集部
ナゾロジーは皆さんの身近にある”素朴な疑問”を解決する科学情報メディアです。
最新の科学技術やおもしろ実験、不思議な生き物を通して、みなさんにワクワクする気持ちを感じてもらいたいと思っています。
Nazologyについて
記事一覧へ

<

1

2

>

コメントを書く

※コメントは管理者の確認後に表示されます。

人気記事ランキング

  • TODAY
  • WEEK
  • MONTH

Amazonお買い得品ランキング

プロダクトのニュースproduct news

もっと見る

役立つ科学情報

注目の科学ニュースpick up !!