ジェミニ、ギャラクシーS26でAIによるアプリ操作開始

ジェミニはAIを用いたタスク自動化機能をギャラクシーS26シリーズで導入したと発表しました。これにより、特定のAndroidアプリをAIアシスタントが操作できるようになったということです。

ギャラクシーS26シリーズ向けに導入されたこの機能は、「スクリーンオートメーション」とも呼ばれ、AIアシスタントが特定のAndroidアプリの操作を引き受ける方針です。この機能はサムスンの新しいスマートフォンとともに発表されましたが、現在は実際に利用可能になっています。

ギャラクシーS26 Ultraでのテストでは、「ポパイズのスパイシーチキンサンドイッチをUber Eatsで注文して」という指示を出すと、AIが背景で注文プロセスを開始しました。ただし、AIはカートに商品を追加するものの、最終的な注文確定は行いません。注文確定の際には通知（強い振動を含む）が送信され、ユーザーがプロセスを完了するように指示されます。Uber Eatsでの追加ページをスキップし、注文確定の画面に直接進むことも可能です。

この機能は概ねうまく機能しますが、テスト中に自動化のプレビューがフルスクリーンで表示され、強制的に再起動しなければならない状況に陥ることもありました。

なお、22ドル（約3400円）という合計金額には、以前のテストでのサンドイッチ2個分が含まれています。

この機能が手動でカートに商品を追加するよりも速いかというと、そうではありませんが、ジェミニが音声コマンドを使用してバックグラウンドでこれらの作業を行うことで、ユーザーは他のことに集中できるという利点があります。

現在、ジェミニは以下のAndroidアプリでタスク自動化をサポートしています。将来的にはInstacartなどの他のアプリも追加される予定ですが、現時点では利用できません。対応アプリの一覧はジェミニの設定で確認でき、これは現在インストールされているアプリに依存するとしています。

デバイスのサポートに関しては、GoogleはPixel 10、Pixel 10 Pro、Pixel 10 Pro XLでもこの機能を導入予定ですが、まだ利用可能ではないようです。ジェミニアプリの設定で「スクリーンオートメーション」を探すことで、機能の導入状況を確認できます。