Geminiの発表内容
利用者が指示した複数手順の作業を、AIが端末上で代行します。
この機能は、配車や宿泊の予約、チケット購入や食料品の注文などの操作に対応します。対象機器は「Google Pixel 10」や「Samsung Galaxy S26」などの指定端末で、18歳以上の個人アカウントで利用できます。対応言語は日本語、英語、韓国語です。
Geminiは端末内の仮想環境を使ってアプリ画面を読み取り、カートへの追加などの処理を進めます。処理の様子は画面で確認でき、途中で中断や手動操作への切り替えが可能です。
移動の手配や備品の代理発注といった反復作業をGeminiに任せることで、手作業の手間を減らせます。注文確定や支払い情報の入力時は手動操作に切り替わるため、確認しながら安全に進められます。
つまり、どういうこと？
ざっくり言うと、スマートフォンの画面操作を代わりにやってくれる副操縦士のような機能です。これまで人間が指でタップしていた出前の注文やタクシーの手配を、AIが画面を見ながら代わりにボタンを押して進めてくれます。最後の購入確定やパスワード入力だけ自分で確認して決済するため、安心して雑用を任せられます。
編集部の見方
AIがアプリ画面を直接操作する段階に来た点に、筆者はかなり驚きました。画面のボタンをAIが認識してタップする仕組みは、これまでの連携機能とは別物です。
スマホ操作の代行。
ただ、決済やログインを人間に差し戻す設計を見る限り、誤作動への警戒感はまだまだ根強い印象を受けます。勝手な注文や誤送金を防ぐ安全弁としては妥当な判断だと思います。
出張の手配や備品の代理発注が多い人なら、作業時間を削る選択肢になります。まずは「Pixel 11」や「Galaxy S26」の国内発売に合わせて、普段使う配車アプリや旅行サイトがどこまで対応するかを確かめたいところです。
誰に関係するか
出張の手配や備品の購入をスマートフォンで行っている人は、Geminiへの指示だけで予約やカート追加の手順を自動化できるようになります。
出典: Google ↗／ ITmedia Mobileも報道
