Geminiの発表内容

米Googleは2026年11月5日、AIツール「Gemini」で手描きのスケッチからアプリを作成する手順を公開しました。紙に描いたアイデアを動くツールへと変換できます。

利用者は、アプリのモックアップや習慣トラッカーなどの下絵を撮影して「Gemini」に読み込ませます。作業画面の「Canvas」を選び、指示を送ることで「Gemini」が画像を読み取ってコードを書きます。

作成したツールはプレビュー画面ですぐに動作を試せます。画面の色や文字の書体、機能の調整もリアルタイムで指示できます。

手描きの構想を抱えている人は、プログラミング作業を省いて直接動く試作品を作れるようになります。

つまり、どういうこと?

ひらたく言うと、ノートの落書きを見せるだけで動く試作品を作ってくれる専属の職人がついたような仕組みです。紙に手描きした操作画面の絵を写真に撮って「Gemini」に渡すと、自動で裏側のプログラムを組み立ててくれます。画面を見ながら色や文字の変更も指示できます。

編集部の見方

紙のメモから直接コードを起こす実例を、Googleが前面に出してきました。構想から動く画面までの距離がかなり縮まっています。筆者は、アプリのモックアップだけでなく習慣トラッカーのような身近なツールを例に挙げている点に親しみやすさを感じました。

スケッチからの即時変換。

ただ、雑に描いた図面や独特の癖字をどこまで正確に読み取れるかは、実際に業務で使う前に確かめる必要があります。手描きの仕様書でそのまま動けば、画面設計の打ち合わせは大きく変わりそうです。まずは裏紙に書いた簡単な計算表あたりから試すのが無難です。次の四半期の機能改善で、複数画面の連携まで扱えるようになるかを見届けたいところです。

誰に関係するか

紙のスケッチでアプリの構想を練っている人は、手描き図面から直接動く試作アプリを作成できるようになります。