GeminiDesktop
ガイド

Gemini デスクトップ Mac 版の画面共有:仕組みと足りない機能

公開日 · 著者: GeminiDesktop Team
GeminiDesktop を Google の優先ソースに追加 トップニュースと AI による回答に GeminiDesktop がもっと表示されます。

画面共有は Gemini for Mac でいちばん注目すべき機能です。Gemini があなたの画面を見て、それを踏まえて答えてくれます。表計算で数式のエラーが出たらウィンドウを共有して質問するだけで、Gemini は画面上のセルを直接引用して答えます。スクリーンショットも、状況説明も要りません。

ただし、多くの人が期待するよりも制限は強めです。

TL;DR クイックリファレンス

  • 起動方法:Gemini for Mac のチャット欄下部にある「Share screen」ボタン、またはショートカット ⌘ ⇧ S
  • 選べる範囲:ウィンドウ単位(アプリひとつ)、ディスプレイ単位(画面全体)。範囲指定やブラウザのタブ単位は未対応
  • モード単発スナップショット(既定)——メッセージを送った瞬間に 1 フレームを取得。継続的なストリーミングではなく、Live API でもありません
  • 必要な権限:「画面収録とシステムオーディオ収録」+「アクセシビリティ」の 2 つ
  • 上限:一度にウィンドウひとつ。切り替えるには再共有が必要。画像は約 1280×720 に圧縮されます
  • 含まれないもの:Gemini Live の音声、常時観察、カーソル追跡、スクロールの記録
  • 共有できるもの:ブラウザのウィンドウ、Mac ネイティブアプリのウィンドウ、ファイルのプレビュー(Preview / QuickLook)
  • 共有できないもの:macOS のメニューバー、DRM 保護された動画(Netflix / Apple TV+)、1Password のロック解除画面などキャプチャ防止されたウィンドウ

画面共有はどうやって始めるの?

チャット欄の共有ボタンを押して対象ウィンドウを選ぶだけで、初回のみ macOS の権限許可が入ります。手順は次のとおりです。

  1. Gemini for Mac を開く(⌥ ⇧ Space でフルウィンドウを呼び出す)
  2. 下部入力欄の右にある「画面を共有」アイコン(ディスプレイ型の小さいアイコン)を探す
  3. 初回は macOS の権限リクエストが出るので「画面収録とシステムオーディオ収録」を許可する
  4. プルダウンから共有するウィンドウを選ぶ(一覧はアプリごとにまとまっています)
  5. 選択すると緑の点が点滅し、フローティング表示に「Sharing: [アプリ名]」が出る
  6. 質問を入力して送信すると、そのタイミングでスナップショットが添付される
  7. 新しい画面の状態をもとに追加で質問したい場合は、もう一度共有ボタンを押してスナップショットを更新する
  8. 停止するには、フローティング表示の「Stop」ボタンを押すか ⌘ ⇧ S をもう一度押す

公式アプリの画面共有はどういう仕組み?

選んだウィンドウの静止スナップショットを 1 枚撮り、それを次のメッセージの文脈として送る仕組みです。

画面共有を有効にすると、アプリは macOS のアクセシビリティ権限を要求します。許可後は、選択した 1 つのウィンドウの静止画を取得し、次のメッセージの文脈にします。あなたが質問を打ち込むと、Gemini はそのスナップショットの内容をもとに答えます。

重要なのは、共有は一度にウィンドウひとつで、見えているのは共有を始めた瞬間の 1 枚だという点です。連続した映像ではありません。ウィンドウの中身が変わっても、再共有しない限り Gemini は更新後を見られません。

アクセシビリティ権限は画面収録権限より踏み込んだもので、他アプリの内容や UI 階層を読み取れます。プライバシーに敏感な人にとっては、天秤にかけるべき判断です。

内部的には、Gemini for Mac は Apple の ScreenCaptureKit API(macOS 12.3 以降)でウィンドウを取得します。ScreenCaptureKit は収録中にメニューバーへ赤い点を表示します。これは macOS のプライバシー設計によるシステムレベルの通知で、Google が回避することはできませんし、その意図もありません。

Gemini は画面の何を見て、何を見ていない?

見えるのは共有した瞬間のそのウィンドウの見た目だけで、動きも音も他ウィンドウも見えていません。

見えるもの

  • 共有対象に選んだウィンドウの現在の見た目——文字、ボタン、画像、表、コード
  • ウィンドウ内の表示領域——スクロールより下は、先にスクロールしてから再共有しない限り見えません
  • 共有した瞬間のそのウィンドウ内のすべての文字(画素から直接読み取ります)

見えないもの

  • 隠れている部分(別のウィンドウが上に重なっている場合、そこは上のウィンドウの内容になります)
  • 動きの変化——マウスの移動、動画の再生、入力中の変化はまったく見えません
  • 音——画面共有で送られるのは画像だけで、Gemini for Mac の初期版に Gemini Live の音声はありません
  • 保護されたコンテンツ——Netflix などの DRM 付きコンテンツは黒や白で写ります
  • 選んでいない他のウィンドウ——同じアプリの別ウィンドウであっても対象外です

プライバシー上の意味: 共有された 1 枚は画像全体が Google のサーバーに送られて処理されます。つまり、ウィンドウにメールの宛先、チャット履歴、口座残高、パスワード(たとえぼやけていても)が写っていれば、それも Google 側の処理に渡ります。Google のプライバシーポリシーは、そのデータは当該リクエストの応答にのみ使うと述べていますが、機微な場面では共有前にウィンドウを整理することを勧めます。

ウィンドウ単位と画面全体、どちらを選ぶべき?

ほとんどの場合はウィンドウ単位で十分で、画面全体が要るのは複数アプリをまたぐ相談のときだけです。

粒度長所短所向いている場面
ウィンドウ単位正確、プライバシーに優しい、通信量が小さいアプリをまたぐ作業を見せられない単一アプリ内の質問(表計算の数式、コードファイル)
ディスプレイ単位全体像を取れる、アプリ横断で見える情報量が多く注意が散る、機微な情報が写りやすい「このデスクトップ全体をどう整理すべき?」「レイアウトを見てほしい」

複数アプリを行き来する意図まで理解してほしい場面は、本質的に単発フレームではなく継続的な観察が必要になります。その話は次で扱います。

単発スナップショットの限界はどこにある?

いちばん価値のある場面ほど時間の経過を見る必要があり、1 枚では足りません。

  • コードのデバッグ:エラーが出る、ログが流れる、変数が変わる——デバッグは時間軸で展開するのに、1 枚では一瞬しか写りません
  • デザインのレビュー:アートボードを行き来し、バリエーションを比べる——変えるたびに再共有が必要です
  • 表の分析:スクロール、シート切り替え、フィルタ適用——1 枚では断片しか見せられません
  • アプリ横断の作業:メールから文書、そしてブラウザへ——一連の流れを見られる AI でなければ意図をつかめません
  • 動画・アニメーションの確認:時間軸の各フレームに意味があり、1 枚ではテンポが分かりません

継続的に画面を見せるにはどうする?

Gemini Live API を使うと、WebSocket 経由で画面の内容をリアルタイムに送り続けられます。

  • 連続した視覚入力:一定間隔で画面のフレームを送り続け、Gemini はフレーム間の文脈を保ちます
  • 音声との同期:音声と映像を同時に入力でき、話しながら Gemini に画面を見せられるので手はキーボードから離れません
  • カメラ映像の併用:カメラ映像も受け付けるため、ハードウェアのデバッグや実物との照合に使えます
  • 時間的な文脈:5 分前に見た内容を引用し、現在の画面と関連づけられます

画面共有はマシンの負荷になる?

単発なら体感できないレベルで、負荷が問題になるのは継続的なストリーミングのときだけです。

  • CPU:ScreenCaptureKit の 1 フレーム符号化に約 30〜80ms。M2 以降ならほぼ無感です
  • GPU:Metal 支援の画像圧縮で GPU の 5〜10%(1 回あたり)
  • メモリ:共有ごとに約 80〜150MB の追加使用
  • 通信:JPEG 圧縮後で約 150〜400KB、4G なら 1〜2 秒でアップロード
  • バッテリー:ウィンドウ単位の単発共有は無視できる程度。継続的なストリーミングは消費が明確に増えます(1 時間あたり約 7〜12%)

ノートで外出作業するなら「単発スナップショット」のまま使い、電源や外部ディスプレイにつないでいるときだけ継続ストリーミングを使うのがおすすめです。

他のデスクトップ AI の画面共有と比べるとどう?

継続的に画面を見続ける点では ChatGPT と Claude が先行し、Gemini for Mac は保守的な「1 枚で質疑」の路線です。

製品画面共有継続観察音声同期隔離のしくみ
Gemini for Mac単発スナップショット(ウィンドウ / 画面単位)なしなしなし(ユーザーの画面を直接見る)
Claude Desktop + Coworkなし(独立した仮想デスクトップ方式)あり(仮想デスクトップ内)なしあり(独立デスクトップ)
ChatGPT Desktop単発スナップショット + Live 視覚あり(Live モード)あり(Voice mode)なし
Perplexity Macネイティブの画面共有なしなしなし
Apple Intelligenceシステム級(App Intents 経由)意味的で、視覚的ではないなし

Gemini for Mac の路線は、プライバシーの範囲が明確で実装も単純という利点がある一方、使える場面が限られるという欠点があります。

画面共有がうまくいかないときは?

原因の多くは権限、ネットワーク、キャプチャ防止の 3 つに集約されます。症状別の対処は次のとおりです。

  1. 共有ボタンが灰色 / 押しても反応しない:macOS の「システム設定 - プライバシーとセキュリティ - 画面収録」で Gemini にチェックが入っていません。許可後は Gemini を完全に終了してから開き直す必要があります。
  2. 共有中の表示は出るのに「画面が見えません」と返ってくる:画像のアップロードが失敗しています(ネットワークの不調)。回線を確認し、社内ネットワークなら generativeai.googleapis.com がブロックされていないか確認してください。
  3. 共有したウィンドウが真っ黒になる:対象アプリが DRM やキャプチャ防止を有効にしています。Netflix、Apple TV+、1Password のロック解除、一部の銀行アプリでよく起きます。システム級の保護なので回避できません。
  4. 複数ディスプレイで違う画面を選んでしまう:プルダウンでディスプレイごとのグループを順に開くと、選択時にメニューバーが該当画面でハイライトされます。
  5. 共有が明らかに遅い:Retina 4K の外部ディスプレイは画像が大きく(3〜6MB になることも)、アップロードに時間がかかります。内蔵ディスプレイに切り替えるか、外部ディスプレイの解像度を下げてください。
  6. 古いスナップショットをもとに答えてくる:新しいスナップショットは新しいメッセージを送るときにしか取得されません。最新の画面を見せたいなら共有ボタンをもう一度押してください。
  7. ウィンドウを切り替えたら共有が切れた:元のウィンドウを閉じると macOS が共有を自動停止します。新しいウィンドウを選び直してください。
  8. 個人情報をうっかり送ってしまった:共有中に機微な情報が見えたらすぐ停止してください。ただしその 1 枚はすでに送信済みです。Google アカウントの設定から Gemini のアクティビティを削除すれば記録を消せます。

GeminiDesktop はどう解決している?

GeminiDesktop は Tauri で作られており、macOS の ScreenCaptureKit API を直接使ってシステム級に効率よく画面を取得し、複数ディスプレイと高 DPI も正しく扱います。

ロードマップの中心は常時観察モードです。継続的にキャプチャし Live API で送り続けるため、質問した時点で Gemini は現在の画面だけでなく、そこに至るまでの操作の流れという完全な文脈を持っています。細かなプライバシー制御で、AI に何を見せるかは自分で決められます。

具体的な違いはこうです。

  • 「範囲指定」の共有に対応(ドラッグで任意の矩形を選択)し、プライバシーの粒度が細かい
  • 複数ウィンドウの同時共有に対応(最大 4 つ)し、アプリ横断の作業を見せられる
  • 「機微な内容のマスク」を内蔵し、パスワード欄やカード番号を自動で伏せて送信
  • ローカルキャッシュモードを選択可能。スクリーンショットをまずローカルに保存し、明示的に確認してから送信

Windows で同じことをするには?

Windows では Gemini のチャットクライアント自体が存在しないため、代替アプリを使う必要があります。2026-04-14 に公開された Google app for desktop はローカルファイル検索はできますが、Gemini のチャットアプリではなく、画面共有機能もありません。詳しくは Google は Gemini Windows アプリを作っていないGemini Windows app vs Google app for desktop を参照してください。

Windows で同等の体験を得たい場合の選択肢は次のとおりです。

  • GeminiDesktop for Windows は画面共有をネイティブに対応し、Live API による継続観察モードも備えます。ネイティブ Gemini Windows appGemini Windows インストールガイド を参照
  • Claude Desktop for Windows + Cowork は仮想デスクトップ単位の画面協働を提供します。位置づけは違いますが一部の用途はカバーできます
  • ChatGPT Desktop for Windows は Voice + Vision を備え、Gemini が将来目指す Live 体験にいちばん近い形です

もっと使いこなすコツは?

公式版の制約は、撮り方と共有の順番を工夫すればかなり回避できます。

  1. スクリーンショットと組み合わせる⌥ ⇧ 4 で範囲をクリップボードに撮り、Gemini のチャット欄に貼り付けます。共有の権限フローを迂回でき、ウィンドウ全体の余計な情報を送らずに済みます
  2. 特定の範囲だけ見せる:公式版は範囲指定の共有に未対応なので、分析したい内容を先に Preview の独立ウィンドウへコピーし、そのウィンドウを共有します
  3. 複数フレームの比較:1 枚目を共有して質問し、手動で次の状態に切り替えてもう一度共有します。Live ストリームではありませんが、連続したメッセージで「流れの観察」を擬似的に再現できます
  4. Canvas と連携する:デザイン案のウィンドウを共有しつつ「このレイアウトを HTML にして」と頼むと、Gemini は理解した内容を Canvas に書き出し、調整できるコードにしてくれます
  5. 画面共有 + Deep Research:まず記事のウィンドウを共有してテーマを理解させ、そのうえで Deep Research を依頼すると、全文をコピペする手間が省けます

FAQ

Q1:画面共有は継続的ですか、それとも 1 回きりですか? Gemini for Mac の初期版は単発スナップショットで、メッセージを送るたびに 1 フレームを取得します。Live の継続ストリームではありません。

Q2:画面共有は通信量やトークンを消費しますか? API の利用枠を消費します。画像入力はトークン換算で課金され、標準解像度の画像 1 枚でおよそ 250〜500 トークンです。Google AI Studio の Gemini 2.5 Pro は 100 万トークンあたり約 $1.25 です。サブスク利用者には別枠があります。

Q3:Gemini に画面を操作させられますか? できません。Gemini for Mac の初期版に Computer Use は含まれず、見ることはできても操作はできません。操作が必要な方は 用語解説:Computer Use を参照してください。

Q4:Intel Mac でも画面共有を使えますか? Google の Gemini for Mac は Apple Silicon のみ対応です。Intel の方は Gemini for Mac の Apple Silicon 限定という制約 を参照してください。GeminiDesktop は Intel にも対応し、画面共有の体験は同じです。

Q5:共有した画面のデータは Google のモデル学習に使われますか? 現在の Google の方針では、有料の Gemini サブスク利用者の会話データは既定で学習に使われず、無料利用者のデータは学習に使われる可能性があります。詳細は Google のプライバシーポリシーが基準になります。

Q6:Zoom のような画面共有と同じものですか? 違います。Zoom の画面共有は別の人間に映像を送るもので、Gemini の画面共有はフレームを AI の推論に渡すものです。送り先も処理のされ方も別物です。

関連記事

ギャップを埋める

公式アプリの画面共有は静止スナップショットだけです。継続的な観察の技術はすでに Live API に存在します。GeminiDesktop はこのギャップを埋めます。ネイティブの画面キャプチャ、Live API による継続ストリーミング、そして手を作業に残したまま使える音声操作です。GeminiDesktop を試す

「機能と用語」の記事 19 本をすべて見る →

これらの AI ツールを試す