Googleは、顔のジェスチャーを利用したショートカットやスイッチでAndroidの支援技術を強化しました

Googleは、顔のジェスチャーを利用したショートカットやスイッチでAndroidの支援技術を強化しました

スマートフォンをより使いやすくすることは常に良い考えであり、Googleの最新機能は、表情で世界と交流する人々に、素早い操作とナビゲーションを提供します。Project Activateとカメラスイッチにより、ユーザーは顔のジェスチャーだけで、カスタムフレーズを話したり、スイッチインターフェースを使って操作したりといったタスクを実行できます。

新機能はスマートフォンの前面カメラを利用し、ユーザーの顔をリアルタイムで捉え、笑顔、眉を上げる、口を開ける、左右または上を向くという6つの表情を認識できます。完全にローカルコンピューティングに依存しており、画像データは保存されません。また、一般的に「顔認識」と呼ばれているような機能も備えていません。この種の機械学習は、例えば眉毛を識別し、眉毛が特定のしきい値(カスタマイズ可能)を超えると信号を送信するといったことに特化できます。

それぞれの表情に異なる役割を割り当てることができます。カメラスイッチはAndroidの既存のスイッチ互換性と統合されており、ジョイスティックや吹き出し管などの補助技術を使用するユーザーは、スマートフォンのOSを操作できます。これにより、周辺機器を一切使用せずに操作が可能になり、ユーザーは選択項目の繰り返し、確定、取り消しなど、様々な顔のジェスチャーを選択できます。

画像クレジット: GoogleProject Activateを使えば、表情をフレーズを話すなどの独立した動作に結び付けることができます。障がいのある方は様々な理由で介護者に頼っていますが、介護者に頼めないことが一つあります。それは、介護者の注意を引くことです!そこで、例えば眉毛を長く上げる動作にデバイスを割り当てて、「やあ!」や「何か手伝ってほしい」「ありがとう!」などのフレーズを発声させるといった使い方が考えられます。

ジェスチャーは、音声ファイルの再生、テキストメッセージの送信、またはあらかじめ設定した番号への通話にも使用できます。表情や機能、そして言語対応も今後追加される予定です。もちろん顔そのものには言語はありませんが、アプリとサポートドキュメントには言語があります。そのため、Project Activateは英語圏から開始し、徐々に対応言語を拡大していく予定です。一方、カメラスイッチは、当初から80の言語で利用可能になります。

どちらもカメラと表情認識機能へのアクセスを必要とするため、同時に使用することはできません。そのため、ユーザーはナビゲーション用のバックアップ手段を用意しておく必要があります。どちらも、ここ5年ほどのAndroidスマートフォンであればほぼすべて動作するはずです。

視覚障害者向けのGoogle Lookoutアプリが食品ラベルや長文文書のスキャンに対応

テッククランチイベント

サンフランシスコ | 2025年10月27日~29日

最後に、視覚障碍者向けにラベルを読み取るGoogleのLookoutアプリのアップデートにより、手書きの内容を印刷物と同様にスキャンして読み上げる機能が追加されました。これは、付箋紙、店舗のドアに貼られた「釣りに行ってきました」のような看板、送り主からのメッセージが書かれたグリーティングカードなどに役立ちます。このアプリは昨年、利用者が大幅に増加したため、現在開発が進められています。(ユーロ紙幣とインドルピー紙幣の識別機能のサポートも、この成長を後押しするでしょう。)

新しいものはすべて、今週後半に無料でご利用いただけるようになる予定です。

デヴィン・コールドウェイはシアトルを拠点とする作家兼写真家です。

彼の個人ウェブサイトは coldewey.cc です。

バイオを見る