Gemini デスクトップ Mac 版の画面共有:仕組みと足りない機能
画面共有は Gemini for Mac でいちばん注目すべき機能です。Gemini があなたの画面を見て、それを踏まえて答えてくれます。表計算で数式のエラーが出たらウィンドウを共有して質問するだけで、Gemini は画面上のセルを直接引用して答えます。スクリーンショットも、状況説明も要りません。
ただし、多くの人が期待するよりも制限は強めです。
TL;DR クイックリファレンス
- 起動方法:Gemini for Mac のチャット欄下部にある「Share screen」ボタン、またはショートカット
⌘ ⇧ S - 選べる範囲:ウィンドウ単位(アプリひとつ)、ディスプレイ単位(画面全体)。範囲指定やブラウザのタブ単位は未対応
- モード:単発スナップショット(既定)——メッセージを送った瞬間に 1 フレームを取得。継続的なストリーミングではなく、Live API でもありません
- 必要な権限:「画面収録とシステムオーディオ収録」+「アクセシビリティ」の 2 つ
- 上限:一度にウィンドウひとつ。切り替えるには再共有が必要。画像は約 1280×720 に圧縮されます
- 含まれないもの:Gemini Live の音声、常時観察、カーソル追跡、スクロールの記録
- 共有できるもの:ブラウザのウィンドウ、Mac ネイティブアプリのウィンドウ、ファイルのプレビュー(Preview / QuickLook)
- 共有できないもの:macOS のメニューバー、DRM 保護された動画(Netflix / Apple TV+)、1Password のロック解除画面などキャプチャ防止されたウィンドウ
画面共有はどうやって始めるの?
チャット欄の共有ボタンを押して対象ウィンドウを選ぶだけで、初回のみ macOS の権限許可が入ります。手順は次のとおりです。
- Gemini for Mac を開く(
⌥ ⇧ Spaceでフルウィンドウを呼び出す) - 下部入力欄の右にある「画面を共有」アイコン(ディスプレイ型の小さいアイコン)を探す
- 初回は macOS の権限リクエストが出るので「画面収録とシステムオーディオ収録」を許可する
- プルダウンから共有するウィンドウを選ぶ(一覧はアプリごとにまとまっています)
- 選択すると緑の点が点滅し、フローティング表示に「Sharing: [アプリ名]」が出る
- 質問を入力して送信すると、そのタイミングでスナップショットが添付される
- 新しい画面の状態をもとに追加で質問したい場合は、もう一度共有ボタンを押してスナップショットを更新する
- 停止するには、フローティング表示の「Stop」ボタンを押すか
⌘ ⇧ Sをもう一度押す
公式アプリの画面共有はどういう仕組み?
選んだウィンドウの静止スナップショットを 1 枚撮り、それを次のメッセージの文脈として送る仕組みです。
画面共有を有効にすると、アプリは macOS のアクセシビリティ権限を要求します。許可後は、選択した 1 つのウィンドウの静止画を取得し、次のメッセージの文脈にします。あなたが質問を打ち込むと、Gemini はそのスナップショットの内容をもとに答えます。
重要なのは、共有は一度にウィンドウひとつで、見えているのは共有を始めた瞬間の 1 枚だという点です。連続した映像ではありません。ウィンドウの中身が変わっても、再共有しない限り Gemini は更新後を見られません。
アクセシビリティ権限は画面収録権限より踏み込んだもので、他アプリの内容や UI 階層を読み取れます。プライバシーに敏感な人にとっては、天秤にかけるべき判断です。
内部的には、Gemini for Mac は Apple の ScreenCaptureKit API(macOS 12.3 以降)でウィンドウを取得します。ScreenCaptureKit は収録中にメニューバーへ赤い点を表示します。これは macOS のプライバシー設計によるシステムレベルの通知で、Google が回避することはできませんし、その意図もありません。
Gemini は画面の何を見て、何を見ていない?
見えるのは共有した瞬間のそのウィンドウの見た目だけで、動きも音も他ウィンドウも見えていません。
見えるもの:
- 共有対象に選んだウィンドウの現在の見た目——文字、ボタン、画像、表、コード
- ウィンドウ内の表示領域——スクロールより下は、先にスクロールしてから再共有しない限り見えません
- 共有した瞬間のそのウィンドウ内のすべての文字(画素から直接読み取ります)
見えないもの:
- 隠れている部分(別のウィンドウが上に重なっている場合、そこは上のウィンドウの内容になります)
- 動きの変化——マウスの移動、動画の再生、入力中の変化はまったく見えません
- 音——画面共有で送られるのは画像だけで、Gemini for Mac の初期版に Gemini Live の音声はありません
- 保護されたコンテンツ——Netflix などの DRM 付きコンテンツは黒や白で写ります
- 選んでいない他のウィンドウ——同じアプリの別ウィンドウであっても対象外です
プライバシー上の意味: 共有された 1 枚は画像全体が Google のサーバーに送られて処理されます。つまり、ウィンドウにメールの宛先、チャット履歴、口座残高、パスワード(たとえぼやけていても)が写っていれば、それも Google 側の処理に渡ります。Google のプライバシーポリシーは、そのデータは当該リクエストの応答にのみ使うと述べていますが、機微な場面では共有前にウィンドウを整理することを勧めます。
ウィンドウ単位と画面全体、どちらを選ぶべき?
ほとんどの場合はウィンドウ単位で十分で、画面全体が要るのは複数アプリをまたぐ相談のときだけです。
| 粒度 | 長所 | 短所 | 向いている場面 |
|---|---|---|---|
| ウィンドウ単位 | 正確、プライバシーに優しい、通信量が小さい | アプリをまたぐ作業を見せられない | 単一アプリ内の質問(表計算の数式、コードファイル) |
| ディスプレイ単位 | 全体像を取れる、アプリ横断で見える | 情報量が多く注意が散る、機微な情報が写りやすい | 「このデスクトップ全体をどう整理すべき?」「レイアウトを見てほしい」 |
複数アプリを行き来する意図まで理解してほしい場面は、本質的に単発フレームではなく継続的な観察が必要になります。その話は次で扱います。
単発スナップショットの限界はどこにある?
いちばん価値のある場面ほど時間の経過を見る必要があり、1 枚では足りません。
- コードのデバッグ:エラーが出る、ログが流れる、変数が変わる——デバッグは時間軸で展開するのに、1 枚では一瞬しか写りません
- デザインのレビュー:アートボードを行き来し、バリエーションを比べる——変えるたびに再共有が必要です
- 表の分析:スクロール、シート切り替え、フィルタ適用——1 枚では断片しか見せられません
- アプリ横断の作業:メールから文書、そしてブラウザへ——一連の流れを見られる AI でなければ意図をつかめません
- 動画・アニメーションの確認:時間軸の各フレームに意味があり、1 枚ではテンポが分かりません
継続的に画面を見せるにはどうする?
Gemini Live API を使うと、WebSocket 経由で画面の内容をリアルタイムに送り続けられます。
- 連続した視覚入力:一定間隔で画面のフレームを送り続け、Gemini はフレーム間の文脈を保ちます
- 音声との同期:音声と映像を同時に入力でき、話しながら Gemini に画面を見せられるので手はキーボードから離れません
- カメラ映像の併用:カメラ映像も受け付けるため、ハードウェアのデバッグや実物との照合に使えます
- 時間的な文脈:5 分前に見た内容を引用し、現在の画面と関連づけられます
画面共有はマシンの負荷になる?
単発なら体感できないレベルで、負荷が問題になるのは継続的なストリーミングのときだけです。
- CPU:ScreenCaptureKit の 1 フレーム符号化に約 30〜80ms。M2 以降ならほぼ無感です
- GPU:Metal 支援の画像圧縮で GPU の 5〜10%(1 回あたり)
- メモリ:共有ごとに約 80〜150MB の追加使用
- 通信:JPEG 圧縮後で約 150〜400KB、4G なら 1〜2 秒でアップロード
- バッテリー:ウィンドウ単位の単発共有は無視できる程度。継続的なストリーミングは消費が明確に増えます(1 時間あたり約 7〜12%)
ノートで外出作業するなら「単発スナップショット」のまま使い、電源や外部ディスプレイにつないでいるときだけ継続ストリーミングを使うのがおすすめです。
他のデスクトップ AI の画面共有と比べるとどう?
継続的に画面を見続ける点では ChatGPT と Claude が先行し、Gemini for Mac は保守的な「1 枚で質疑」の路線です。
| 製品 | 画面共有 | 継続観察 | 音声同期 | 隔離のしくみ |
|---|---|---|---|---|
| Gemini for Mac | 単発スナップショット(ウィンドウ / 画面単位) | なし | なし | なし(ユーザーの画面を直接見る) |
| Claude Desktop + Cowork | なし(独立した仮想デスクトップ方式) | あり(仮想デスクトップ内) | なし | あり(独立デスクトップ) |
| ChatGPT Desktop | 単発スナップショット + Live 視覚 | あり(Live モード) | あり(Voice mode) | なし |
| Perplexity Mac | ネイティブの画面共有なし | なし | なし | — |
| Apple Intelligence | システム級(App Intents 経由) | 意味的で、視覚的ではない | なし | — |
Gemini for Mac の路線は、プライバシーの範囲が明確で実装も単純という利点がある一方、使える場面が限られるという欠点があります。
画面共有がうまくいかないときは?
原因の多くは権限、ネットワーク、キャプチャ防止の 3 つに集約されます。症状別の対処は次のとおりです。
- 共有ボタンが灰色 / 押しても反応しない:macOS の「システム設定 - プライバシーとセキュリティ - 画面収録」で Gemini にチェックが入っていません。許可後は Gemini を完全に終了してから開き直す必要があります。
- 共有中の表示は出るのに「画面が見えません」と返ってくる:画像のアップロードが失敗しています(ネットワークの不調)。回線を確認し、社内ネットワークなら generativeai.googleapis.com がブロックされていないか確認してください。
- 共有したウィンドウが真っ黒になる:対象アプリが DRM やキャプチャ防止を有効にしています。Netflix、Apple TV+、1Password のロック解除、一部の銀行アプリでよく起きます。システム級の保護なので回避できません。
- 複数ディスプレイで違う画面を選んでしまう:プルダウンでディスプレイごとのグループを順に開くと、選択時にメニューバーが該当画面でハイライトされます。
- 共有が明らかに遅い:Retina 4K の外部ディスプレイは画像が大きく(3〜6MB になることも)、アップロードに時間がかかります。内蔵ディスプレイに切り替えるか、外部ディスプレイの解像度を下げてください。
- 古いスナップショットをもとに答えてくる:新しいスナップショットは新しいメッセージを送るときにしか取得されません。最新の画面を見せたいなら共有ボタンをもう一度押してください。
- ウィンドウを切り替えたら共有が切れた:元のウィンドウを閉じると macOS が共有を自動停止します。新しいウィンドウを選び直してください。
- 個人情報をうっかり送ってしまった:共有中に機微な情報が見えたらすぐ停止してください。ただしその 1 枚はすでに送信済みです。Google アカウントの設定から Gemini のアクティビティを削除すれば記録を消せます。
GeminiDesktop はどう解決している?
GeminiDesktop は Tauri で作られており、macOS の ScreenCaptureKit API を直接使ってシステム級に効率よく画面を取得し、複数ディスプレイと高 DPI も正しく扱います。
ロードマップの中心は常時観察モードです。継続的にキャプチャし Live API で送り続けるため、質問した時点で Gemini は現在の画面だけでなく、そこに至るまでの操作の流れという完全な文脈を持っています。細かなプライバシー制御で、AI に何を見せるかは自分で決められます。
具体的な違いはこうです。
- 「範囲指定」の共有に対応(ドラッグで任意の矩形を選択)し、プライバシーの粒度が細かい
- 複数ウィンドウの同時共有に対応(最大 4 つ)し、アプリ横断の作業を見せられる
- 「機微な内容のマスク」を内蔵し、パスワード欄やカード番号を自動で伏せて送信
- ローカルキャッシュモードを選択可能。スクリーンショットをまずローカルに保存し、明示的に確認してから送信
Windows で同じことをするには?
Windows では Gemini のチャットクライアント自体が存在しないため、代替アプリを使う必要があります。2026-04-14 に公開された Google app for desktop はローカルファイル検索はできますが、Gemini のチャットアプリではなく、画面共有機能もありません。詳しくは Google は Gemini Windows アプリを作っていない と Gemini Windows app vs Google app for desktop を参照してください。
Windows で同等の体験を得たい場合の選択肢は次のとおりです。
- GeminiDesktop for Windows は画面共有をネイティブに対応し、Live API による継続観察モードも備えます。ネイティブ Gemini Windows app と Gemini Windows インストールガイド を参照
- Claude Desktop for Windows + Cowork は仮想デスクトップ単位の画面協働を提供します。位置づけは違いますが一部の用途はカバーできます
- ChatGPT Desktop for Windows は Voice + Vision を備え、Gemini が将来目指す Live 体験にいちばん近い形です
もっと使いこなすコツは?
公式版の制約は、撮り方と共有の順番を工夫すればかなり回避できます。
- スクリーンショットと組み合わせる:
⌥ ⇧ 4で範囲をクリップボードに撮り、Gemini のチャット欄に貼り付けます。共有の権限フローを迂回でき、ウィンドウ全体の余計な情報を送らずに済みます - 特定の範囲だけ見せる:公式版は範囲指定の共有に未対応なので、分析したい内容を先に Preview の独立ウィンドウへコピーし、そのウィンドウを共有します
- 複数フレームの比較:1 枚目を共有して質問し、手動で次の状態に切り替えてもう一度共有します。Live ストリームではありませんが、連続したメッセージで「流れの観察」を擬似的に再現できます
- Canvas と連携する:デザイン案のウィンドウを共有しつつ「このレイアウトを HTML にして」と頼むと、Gemini は理解した内容を Canvas に書き出し、調整できるコードにしてくれます
- 画面共有 + Deep Research:まず記事のウィンドウを共有してテーマを理解させ、そのうえで Deep Research を依頼すると、全文をコピペする手間が省けます
FAQ
Q1:画面共有は継続的ですか、それとも 1 回きりですか? Gemini for Mac の初期版は単発スナップショットで、メッセージを送るたびに 1 フレームを取得します。Live の継続ストリームではありません。
Q2:画面共有は通信量やトークンを消費しますか? API の利用枠を消費します。画像入力はトークン換算で課金され、標準解像度の画像 1 枚でおよそ 250〜500 トークンです。Google AI Studio の Gemini 2.5 Pro は 100 万トークンあたり約 $1.25 です。サブスク利用者には別枠があります。
Q3:Gemini に画面を操作させられますか? できません。Gemini for Mac の初期版に Computer Use は含まれず、見ることはできても操作はできません。操作が必要な方は 用語解説:Computer Use を参照してください。
Q4:Intel Mac でも画面共有を使えますか? Google の Gemini for Mac は Apple Silicon のみ対応です。Intel の方は Gemini for Mac の Apple Silicon 限定という制約 を参照してください。GeminiDesktop は Intel にも対応し、画面共有の体験は同じです。
Q5:共有した画面のデータは Google のモデル学習に使われますか? 現在の Google の方針では、有料の Gemini サブスク利用者の会話データは既定で学習に使われず、無料利用者のデータは学習に使われる可能性があります。詳細は Google のプライバシーポリシーが基準になります。
Q6:Zoom のような画面共有と同じものですか? 違います。Zoom の画面共有は別の人間に映像を送るもので、Gemini の画面共有はフレームを AI の推論に渡すものです。送り先も処理のされ方も別物です。
関連記事
- 用語解説:Computer Use
- 用語解説:Option+Space ショートカット
- Gemini for Mac 徹底レビュー
- Gemini Mac インストールのトラブルシューティング
- Gemini vs ChatGPT Desktop 比較
ギャップを埋める
公式アプリの画面共有は静止スナップショットだけです。継続的な観察の技術はすでに Live API に存在します。GeminiDesktop はこのギャップを埋めます。ネイティブの画面キャプチャ、Live API による継続ストリーミング、そして手を作業に残したまま使える音声操作です。GeminiDesktop を試す。