手話から、伝える・入力する・操作する・遊ぶへ。デジタル体験を広げる「ぽこフレ」を 開発

手話認識と、さまざまな「手話ツール」を備えたAndroid版・iOS版を近日提供予定

ぽこぽ合同会社（本社：埼玉県さいたま市、代表：岡本 直也）は、手話をデジタルの入力や操作として使えるサービス 「ぽこフレ」のAndroid版・iOS版を開発しています。

開発者である代表の岡本直也自身もろう者であり、手話を使う当事者として本サービスを開発しています。

アプリを起動し、ホーム画面でカメラに手話を見せるだけで、指文字や一部の手話表現を認識し、 ひらがなや日本語として画面に表示します。 また「手話ツール」では、手話を使って暮らしのツールやゲームを操作する、さまざまな体験を提供します。 現在、正式リリースに向けて開発と検証を進めています。

手話は言語です。ぽこフレはこの前提に立ち、手話を使う人と日本語を使う人をつなぐコミュニケーションの選択肢を用意するとともに、 手話をデジタルの入力や操作として使える体験を広げていきます。

音声や文字から始まるデジタル体験があるように、手話から始まる体験も、もっと当たり前にあっていい。 「伝える・入力する・操作する・遊ぶ」を軸に、手話を日常のデジタルインターフェースへ広げていくサービスです。

現在、認識できる手話表現はまだ限られています。指文字と一部の手話表現に対応していますが、 地域や世代による表現の違い、個人差にはまだ十分対応できていません。

対応する表現は、手話ツールを通してご協力いただいた手話データなどを活用しながら、 少しずつ増やしていく予定です。

※手話データの取り扱いについて、アプリ内のホーム画面の手話認識では、カメラ映像は端末内で処理され、外部サーバーへ送信されないため、手話データは収集されません。ただし、一部の手話ツールを利用した場合は、手話データが外部サーバーへ送信・収集されます。

ぽこフレには、手話を使って暮らしのツールやゲームを動かす「手話ツール」という仕組みがあります。 現在、サービスサイトでは次の3つをピックアップして紹介しています。

手話を、コミュニケーションのためだけのものにしない。伝える。入力する。操作する。遊ぶ。 ぽこフレは「手話 × デジタル」を軸に、手話から始まる新しいデジタル体験を広げていきます。

• 手話ツールを通してご協力いただいた手話データなどを活用し、認識精度を高めたり、認識できる手話表現を増やしたりします。
• また、新しい機能や体験としての「手話ツール」も追加していきます。
• 正式リリースに向けて、使いやすさや端末上での安定動作を検証します。

提供時期、対応端末、ダウンロード方法などの詳細は、決定次第公式サイトでお知らせします。

ぽこぽ合同会社は、AI・アクセシビリティ技術の研究開発と、人が集まりつながる場所づくりに取り組んでいます。 ぽこフレでは、手話を日常のデジタルインターフェースへ広げる体験づくりを進めています。

取材・掲載・協業に関するお問い合わせは、ぽこぽ合同会社のお問い合わせフォームからお送りください。

お問い合わせフォーム