Gemini for Mac、デスクトップアプリを代わりに操作する機能を追加

Gemini for Mac、デスクトップアプリを代わりに操作する機能を追加
平山 大樹(AB通信 運営責任者)

平山 大樹 AB通信 運営責任者

AB通信 編集部が、企業・行政の公式発表や決算資料などの一次情報を確認して書いています。運営会社・編集方針

目次

この記事のポイント

  • Googleは2026年11月19日、Mac版Geminiアプリに「computer use」を追加したと発表しました。作業内容を伝えると、クリック、文字入力、メニュー操作、フォーム入力を代わりに進めます
  • 作業は切り離された背景ウィンドウで進み、チャットにライブプレビューが表示されます。自分の画面とカーソルはそのまま使えます
  • 操作できるアプリは利用者が選びます。手順はリアルタイムで確認でき、いつでも一時停止できます。ログインや支払いでは一時停止し、重要な操作の前には確認を求めます
  • 提供は米国の英語環境です。対象は18歳以上の個人向けGoogleアカウントで、Google AI Plus、Pro、Ultra。端末はApple Silicon搭載で、macOS Sequoia(15.0)以降です。日本や日本語での提供は、公式発表では案内されていません
  • 公式の使用例は、写真の一括色補正や3Dシーンの準備、PDFからの転記、ダッシュボードからの資料作成、出品の準備などです

何ができるようになったか

Googleは2026年11月19日、公式ブログ「Automate Mac tasks with Gemini computer use」(Michael Friedman / Group Product Manager, Gemini App)で、Mac版Geminiアプリにcomputer useを追加したと発表しました。同日付けのGeminiアプリのリリースノート(2026.11.19)も、同じ機能を案内しています。公式X(@GeminiApp)は、日本時間2026年11月20日5:26に投稿し、フォルダ、アプリ、ウェブをまたいだ作業を任せられること、画面とカーソルは自分のまま使えることを伝えています。

公式ブログによると、やりたいことを伝えると、Geminiがクリック、文字入力、メニュー操作、フォーム入力を進めます。対象は、Mac内のファイル、デスクトップアプリ、ウェブです。これまで何十回もクリックしていた繰り返しの作業を、短く済ませやすくする、としています。

公式Xは、ライブの背景ウィンドウで、Geminiがクリック、スクロール、入力する様子を見られる、とも書いています。公式のデモは、子どもの蝶のスケッチを、Blenderで動かす3Dモデルにする作業です。

公式ブログのメイン画像。指示の末尾に「@Computer use」とあり、Thinking it throughの下でBlenderが開かれ、蝶の3Dモデルが表示されている
公式デモの依頼画面。出典:Google公式ブログ「Automate Mac tasks with Gemini computer use」(2026年11月19日)
公式デモ動画の画面。「What can I get done for you?」とあり、蝶のスケッチが添付され、入力欄はDescribe a task、下の切替はChatとTaskでTaskが選ばれている
作業内容を伝える画面。出典:公式ブログ「Automate Mac tasks with Gemini computer use」に掲載されたデモ動画(2026年11月19日)
公式デモ動画の画面。左上にBlenderと表示された別ウィンドウで、蝶の3Dモデルのメッシュを組み立てている
別ウィンドウでBlenderを操作している様子。出典:公式ブログ「Automate Mac tasks with Gemini computer use」に掲載されたデモ動画(2026年11月19日)

公式デモの動画には、「Sequences shortened. Google AI subscription may be required. Availability and features vary by region. Supervise closely, interrupt when needed. 18+。」という注記があります。地域によって使える機能が違うこと、作業をよく監督し、必要なら中断すること、18歳以上向けであることが示されています。

使い方と安全の仕組み

公式ブログは、プライバシーと安全の仕組みを次のように説明しています。どのアプリにアクセスできるかは利用者が選び、すべての手順をライブで確認でき、いつでも一時停止でき、重要な操作の前には承認する、という内容です。リリースノートは、作業が専用の別ウィンドウで進むこと、ライブプレビューを見られること、1クリックでいつでも止められること、画面とカーソルは自分のまま使えることを書いています。加えて、ログインや支払いではGeminiが一時停止し、機微な操作の前には確認を求める場合がある、としています。

公式ブログのメイン画像では、指示の末尾に「@Computer use」と付けて依頼する例が示されています。アプリの入手先は、公式ブログと公式Xが gemini.google/mac を案内しています。リリースノートは gemini.google/desktop も案内しています。

図:Gemini for Macのcomputer useが動く流れ。使うアプリを自分で選ぶ、作業を伝える、別ウィンドウで操作が進む、重要な操作の前に人が確認する、いつでも止められる、の5段階
出典:Google公式ブログ「Automate Mac tasks with Gemini computer use」(2026年11月19日)と、Geminiアプリのリリースノート(2026.11.19)をもとにAB通信が作成

対象条件(日本ではまだ使えない)

公式ブログ、リリースノート、公式Xの案内は一致しています。computer useの提供は、米国の英語環境です。

対象は、次のとおりです。

  • 18歳以上の個人向けGoogleアカウント
  • Google AI Plus、Google AI Pro、Google AI Ultra
  • Apple Silicon搭載のMacで、macOS Sequoia(15.0)以降

公式ブログ、リリースノート、公式Xのいずれも、日本や日本語での提供には触れていません。日本での提供時期も、案内されていません。職場や学校のアカウントについては、この機能の対象として書かれていません。対象は個人向けGoogleアカウントです。

Mac版Geminiアプリ自体の動作条件は、公式ヘルプ「Use the Gemini app on Mac」でも、Apple Silicon搭載でmacOS Sequoia(15.0)以降、メモリ8GB以上、インストールに200MB以上の空き容量、安定したインターネット接続、と案内されています。

公式の使用例を、日本の業務に当てはめると

公式ブログが挙げる使い方は、次の4つです。提供は米国の英語環境に限られるため、日本の事業者がすぐに使えるわけではありません。公式が示している操作の範囲(ローカルのファイル、デスクトップアプリ、ウェブでのクリックや入力、フォーム記入)に沿って、日本の業務に置き換えると、次のような作業が考えられます。

制作の繰り返し作業を速くする。公式の例は、デザインソフトで写真の色補正をまとめて行うこと、複雑な3Dシーンを組み立てることです。商品写真の色をそろえる、製品紹介用の3Dシーンを準備する、といった作業に当てはめられます。

手入力のフォーム記入を省く。公式の例は、ローカルのPDFから重量、寸法、住所を読み取り、項目の多い配送見積のフォームに入力することです。納品書や仕様書のPDFから数値と届け先を抜き出して、配送見積や受発注の画面に転記する作業や、請求書・領収書のPDFから日付、金額、取引先を確認して、経費精算の画面や表計算にまとめる作業に近い使い方です。

ライブの数字を、発表用の資料にする。公式の例は、複数地域のダッシュボードから指標とスクリーンショットを集め、Googleスライドで発表資料を作ることです。店舗別や拠点別の販売ダッシュボードから数字と画面を集め、週次報告のスライドにまとめる作業に当てはめられます。

出品の準備をまとめて進める。公式の例は、衣料品の写真が入ったフォルダを基に相場を調べ、商品情報を記録し、再販のサービスへの出品を準備することです。在庫写真から商品情報を整理し、販売サイトへの出品下書きを整える作業に近い使い方です。

いずれの場合も、ログインや支払い、送信などの重要な操作の前には、人が確認する前提です。公式も、重要な操作の前に承認すること、ログインや支払いでは一時停止することを案内しています。

「タスク」との違い

Geminiには、すでに「Tasks in Gemini」(タスク)があります。タスクは、日本を含む6か国で無料の展開が始まっています。詳しくはGemini、代わりに作業する「タスク」を日本でも無料にで解説しています。公式ブログによると、タスクはGoogle Cloud上の、アカウント専用の仮想マシンで進みます。

一方、今回のcomputer useは、自分のMacに入っているアプリや、Mac内のファイル、ウェブを、切り離されたウィンドウで直接操作する機能です。提供範囲も、現時点では米国の英語環境に限られています。両方とも「代わりに作業する」点は近いですが、動く場所と、いま使える国が違います。

関連記事(AB通信)

出典

更新履歴

  • 2026年11月20日:初稿

営業メールなし/無料

AI・SEOの動きは、
毎朝7時のメールで追いつける

平山 大樹(AB通信 運営責任者)

毎朝6時に私がピックアップしてます!

平山 大樹|AB通信 運営責任者

AB通信のメール配信イメージ

もうXを追いかけなくていい。前日にAB通信で公開したAI・SEOの新着記事を、朝のうちにまとめてお届けします。

毎朝7時ごろ、前日のAI・SEOの新着記事をメールでお届けします。

営業メールは送りません。無料で、配信はいつでも解除できます。
登録後に届く確認メールの「登録を確定する」ボタンで完了です(迷惑メールフォルダもご確認ください)。

目次