本文へ移動
LIFEMAKERS.COM — 自給率を上げる。自立型ライフの実践知メディア
Aboutベータ版
Signal観測テクノロジーと道具FUTURE LIFE BRIEF

Gemini の Mac 版、アプリの操作を別の窓で代行

Google は Mac 向け Gemini に、裏の窓でアプリを操作する機能を加えた。触らせるアプリの選び方と、まだ使える人が限られる条件を整理する。

Gemini の Mac 版、アプリの操作を別の窓で代行のイメージ

この記事でわかること

  • Mac 向け Gemini が、ファイル・アプリ・ウェブをまたいでクリックや入力を代行する
  • 作業は裏の窓で進み、触れるアプリの選択・一時停止・事前の承認は使う人が持つ
  • 提供は米国の英語から。Apple シリコンの Mac と有料プランが条件

Google は11月19日、Mac 向けの Gemini アプリに「コンピューター操作 (computer use)」の機能を加えた。手元のファイル、デスクトップのアプリ、ウェブをまたいで、クリックや文字入力、メニュー選び、フォームの記入を Gemini が代わりに進める。

Google 公式ブログ「Let Gemini tackle repetitive chores on your Mac」(2026年11月19日・機能・使い道・提供条件)Google

作業は画面の外の別の窓で進むので、使う人は自分の手を止めずに済む。その代わり、どのアプリを AI に触らせ、どこで止めるかを決める役目は使う人の側に残る。

裏の窓で動き、チャットに中継される

Google の発表によると、Gemini は切り離された裏の窓の中で作業し、その様子はチャット欄にライブで映る。メインの画面とカーソルは空いたままなので、文字を打つ、デザインをする、通話をするといった自分の作業を続けられる。

使う人の手元に残る操作は 4 つだ。

  • Gemini が触れるアプリを選ぶ
  • 作業の一歩一歩をライブで見る
  • いつでも一時停止する
  • 重要な操作を、実行される前に承認する

発表が挙げた 4 つの使い道

  • デザインソフトで写真の色をまとめて補正する、3D の場面を組み立てる
  • 手元の PDF から重さ・寸法・住所を抜き出し、配送見積もりの入力欄を埋める
  • ダッシュボードから数字と画面の写しを集め、Google スライドの資料にする
  • フォルダにある服の写真を分析し、相場を調べ、品目の情報を記録して、中古品の売買サービスへの出品を準備する

最後の例で発表が書いているのは出品の準備 (stage listings) までで、公開のボタンを押すところまでとは書かれていない。どの段階で人の承認をはさむかは、使い道ごとに変わりそうだ。

使える人はまだ限られる

条件は重なっている。米国で英語から順に提供され、Apple シリコンを積んだ Mac で macOS Sequoia 15.0 以降が要る。対象は 18 歳以上の個人の Google アカウントで、有料プランの Google AI Plus・Pro・Ultra の利用者に限られる。日本語での提供の時期は、発表には書かれていない。

触らせるアプリを選ぶ前に

まだ分からないことも残る。承認を求められる「重要な操作」がどこからなのか、作業を誤ったとき (違う入力欄への記入、意図しないファイルの上書き) にどう戻すのかを、発表は具体的に書いていない。

手間を減らす代わりに差し出すのは、選んだアプリの中身を AI に見せることだ。写真の補正や資料づくりのように、やり直しがきく作業から試す手がある。住所や支払いが絡む画面まで任せるかどうかは、承認の仕組みを自分で試してから決めても遅くない。

日本での提供と日本語への対応は、Google の公式ブログ「The Keyword」の Gemini アプリ欄と、ダウンロードページ gemini.google/mac で確かめられる。

ことば

  • コンピューター操作 (computer use) — AI が画面を読み取り、人の代わりにクリックや文字入力をしてアプリを動かす機能。答えるだけだった AI が、手を動かす側に回る。
  • Google AI Plus・Pro・Ultra — Google の有料の AI プラン。今回の Mac での操作の代行は、このいずれかの利用者に限って提供される。

あなたなら、Gemini に最初に触らせるのはどのアプリだろうか?

参照

あなたの暮らしで、最初に試せることは何でしょうか。