GeminiDesktop
가이드

제미나이 데스크톱 맥 화면 공유: 작동 방식과 빠진 기능

게시일 · 작성자: GeminiDesktop Team
GeminiDesktop을 Google 선호 소스로 추가 주요 뉴스와 AI 답변에서 GeminiDesktop를 더 자주 만나보세요.

화면 공유는 Gemini for Mac에서 가장 눈여겨볼 기능입니다. Gemini가 당신 화면을 보고 그에 맞춰 답합니다. 스프레드시트에서 수식 오류가 났다면 창을 공유하고 물어보기만 하면, Gemini가 화면의 셀을 직접 인용해 답합니다. 스크린샷도, 상황 설명도 필요 없습니다.

다만 대부분이 기대하는 것보다 제약이 큽니다.

TL;DR 한눈에 보기

  • 실행 방법: Gemini for Mac 채팅창 하단의 ‘Share screen’ 버튼, 또는 단축키 ⌘ ⇧ S
  • 선택 범위: 창 단위(앱 하나), 디스플레이 단위(화면 전체). 영역 지정이나 브라우저 탭 단위는 아직 미지원
  • 모드: 단발 스냅숏(기본) — 메시지를 보내는 순간 한 프레임을 캡처. 지속 스트리밍이 아니며 Live API도 아님
  • 필요 권한: ‘화면 기록 및 시스템 오디오 녹음’ + ‘손쉬운 사용’ 두 가지
  • 한계: 한 번에 창 하나. 창을 바꾸려면 다시 공유해야 하고, 이미지는 약 1280×720으로 압축됨
  • 포함되지 않는 것: Gemini Live 음성, 상시 관찰, 커서 추적, 스크롤 기록
  • 공유 가능한 것: 브라우저 창, 맥 네이티브 앱 창, 파일 미리보기(Preview / QuickLook)
  • 공유 불가능한 것: macOS 메뉴 막대, DRM 보호 영상(Netflix / Apple TV+), 1Password 잠금 해제 화면 등 캡처 방지 창

화면 공유는 어떻게 시작하나요?

채팅창의 공유 버튼을 눌러 대상 창을 고르면 되고, 처음 한 번만 macOS 권한 허용이 필요합니다. 순서는 다음과 같습니다.

  1. Gemini for Mac을 연다(⌥ ⇧ Space로 전체 창 호출)
  2. 하단 입력창 오른쪽에서 ‘화면 공유’ 아이콘(디스플레이 모양의 작은 아이콘)을 찾는다
  3. 처음 쓸 때는 macOS 권한 요청이 뜨므로 ‘화면 기록 및 시스템 오디오 녹음’을 허용한다
  4. 드롭다운에서 공유할 창을 고른다(목록은 앱별로 묶여 있다)
  5. 선택하면 초록 점이 깜빡이고 떠 있는 표시에 ‘Sharing: [앱 이름]‘이 나타난다
  6. 질문을 입력해 보내면 그 시점의 스냅숏이 첨부된다
  7. 바뀐 화면 상태로 이어서 묻고 싶다면 공유 버튼을 다시 눌러 스냅숏을 갱신한다
  8. 멈추려면 떠 있는 표시의 ‘Stop’ 버튼을 누르거나 ⌘ ⇧ S를 다시 누른다

공식 앱의 화면 공유는 어떻게 작동하나요?

선택한 창의 정지 스냅숏 한 장을 찍어 다음 메시지의 맥락으로 보내는 방식입니다.

화면 공유를 켜면 앱은 macOS 손쉬운 사용 권한을 요청합니다. 허용하면 선택한 창 하나의 정지 화면을 캡처해 다음 메시지의 맥락으로 씁니다. 질문을 입력하면 Gemini는 그 스냅숏을 바탕으로 답합니다.

핵심은 한 번에 창 하나만 공유되고, 보이는 것은 공유를 시작한 그 순간의 한 장이라는 점입니다. 연속 영상이 아닙니다. 창 내용이 바뀌어도 다시 공유하지 않으면 Gemini는 갱신된 화면을 볼 수 없습니다.

손쉬운 사용 권한은 화면 기록 권한보다 깊게 들어가, 다른 앱의 내용과 UI 계층까지 읽을 수 있습니다. 프라이버시에 민감한 사용자라면 저울질이 필요한 결정입니다.

내부적으로 Gemini for Mac은 Apple의 ScreenCaptureKit API(macOS 12.3 이상)로 창을 캡처합니다. ScreenCaptureKit은 기록 중임을 알리는 빨간 점을 메뉴 막대에 표시합니다. macOS의 프라이버시 설계에 따른 시스템 차원의 고지라 Google이 우회할 수도 없고 그럴 의도도 없습니다.

Gemini는 화면에서 무엇을 보고 무엇을 못 보나요?

보이는 것은 공유한 순간 그 창의 겉모습뿐이고, 움직임도 소리도 다른 창도 보이지 않습니다.

볼 수 있는 것:

  • 공유 대상으로 고른 창의 현재 화면 내용 — 글자, 버튼, 이미지, 표, 코드
  • 창 안의 보이는 영역 — 스크롤 아래쪽은 먼저 스크롤한 뒤 다시 공유해야 보입니다
  • 공유 순간 그 창 안의 모든 글자(픽셀에서 직접 읽습니다)

볼 수 없는 것:

  • 가려진 부분(다른 창이 위에 겹쳐 있으면 그 부분은 위 창의 내용이 됩니다)
  • 움직이는 변화 — 마우스 이동, 영상 재생, 입력 중 변화는 전혀 보이지 않습니다
  • 소리 — 화면 공유는 이미지만 보내며, Gemini for Mac 초기 버전에는 Gemini Live 음성이 없습니다
  • 보호된 콘텐츠 — Netflix 같은 DRM 콘텐츠는 검게 또는 하얗게 찍힙니다
  • 선택하지 않은 다른 창 — 같은 앱의 다른 창이라도 대상이 아닙니다

프라이버시 측면: 공유된 한 장은 이미지 전체가 Google 서버로 전송돼 처리됩니다. 즉 창에 메일 수신자, 대화 기록, 계좌 잔액, 비밀번호(흐릿하더라도)가 보이면 그것도 Google 쪽 처리로 넘어갑니다. Google의 개인정보 정책은 해당 데이터를 현재 요청에 응답하는 용도로만 쓴다고 밝히지만, 민감한 상황에서는 공유 전에 창을 정리하기를 권합니다.

창 단위와 전체 화면 중 무엇을 골라야 하나요?

대부분은 창 단위로 충분하고, 전체 화면은 여러 앱을 오가는 상담일 때만 필요합니다.

범위장점단점적합한 상황
창 단위정확하고 프라이버시에 유리하며 대역폭이 적음앱을 넘나드는 작업을 보여 줄 수 없음단일 앱 안의 질의(스프레드시트 수식, 코드 파일)
디스플레이 단위전체 그림을 담고 앱 횡단이 보임정보 밀도가 높아 주의가 분산되고 민감 정보가 노출되기 쉬움’이 데스크톱 전체를 어떻게 정리할까’ ‘레이아웃 좀 봐 줘’

여러 앱을 오가는 의도까지 이해시키려는 상황은 본질적으로 한 장이 아니라 지속적인 관찰이 필요합니다. 그 이야기는 다음에서 다룹니다.

단발 스냅숏의 한계는 어디인가요?

가장 값진 상황일수록 시간의 흐름을 봐야 하는데, 한 장으로는 부족합니다.

  • 코드 디버깅: 오류가 뜨고, 로그가 흐르고, 변숫값이 바뀝니다. 디버깅은 시간축으로 펼쳐지는데 한 장은 한순간만 담습니다
  • 디자인 리뷰: 아트보드를 오가며 컴포넌트 변형을 비교합니다. 바꿀 때마다 다시 공유해야 합니다
  • 표 분석: 스크롤, 시트 전환, 필터 적용 — 한 장은 한 조각만 보여 줍니다
  • 앱 횡단 작업: 메일에서 문서로, 다시 브라우저로. 이 흐름을 볼 수 있어야 의도를 이해합니다
  • 영상·애니메이션 검토: 타임라인의 프레임마다 의미가 있어 한 장으로는 리듬을 알 수 없습니다

화면을 계속 보게 하려면 어떻게 하나요?

Gemini Live API를 쓰면 WebSocket으로 화면 내용을 실시간으로 계속 보낼 수 있습니다.

  • 연속 시각 입력: 일정 간격으로 화면 프레임을 계속 보내고, Gemini는 프레임 사이의 맥락을 유지합니다
  • 음성 동기: 오디오와 영상을 동시에 넣을 수 있어, 말하면서 화면을 보여 주기 때문에 손이 키보드를 떠나지 않습니다
  • 카메라 영상 병용: 카메라 영상도 받아 하드웨어 디버깅이나 실물 대조에 쓸 수 있습니다
  • 시간 맥락: 5분 전에 본 내용을 인용해 현재 화면과 연결할 수 있습니다

화면 공유는 성능을 많이 잡아먹나요?

단발이면 체감하기 어려운 수준이고, 부담이 문제 되는 건 지속 스트리밍일 때뿐입니다.

  • CPU: ScreenCaptureKit이 한 프레임을 인코딩하는 데 약 30~80ms. M2 이상이면 거의 못 느낍니다
  • GPU: Metal 가속 이미지 압축이 GPU의 5~10%(1회 기준)
  • 메모리: 공유할 때마다 약 80~150MB 추가 사용
  • 네트워크: JPEG 압축 후 약 150400KB, 4G에서 12초면 업로드
  • 배터리: 창 단위 단발 공유의 영향은 무시할 만합니다. 지속 스트리밍은 소모가 뚜렷하게 늘어납니다(시간당 약 7~12%)

노트북으로 밖에서 작업한다면 ‘단발 스냅숏’을 유지하고, 전원이나 외장 디스플레이에 연결했을 때만 지속 스트리밍을 켜는 편이 좋습니다.

다른 데스크톱 AI의 화면 공유와 비교하면 어떤가요?

화면을 계속 지켜보는 능력에서는 ChatGPT와 Claude가 앞서고, Gemini for Mac은 보수적인 ‘한 장으로 질의’ 노선입니다.

제품화면 공유지속 관찰음성 동기격리 장치
Gemini for Mac단발 스냅숏(창 / 화면 단위)없음없음없음(사용자 화면을 직접 봄)
Claude Desktop + Cowork없음(독립 가상 데스크톱 방식)있음(가상 데스크톱 안)없음있음(독립 데스크톱)
ChatGPT Desktop단발 스냅숏 + Live 시각있음(Live 모드)있음(Voice mode)없음
Perplexity Mac네이티브 화면 공유 없음없음없음
Apple Intelligence시스템 차원(App Intents 경유)의미 기반, 시각 기반 아님없음

Gemini for Mac의 노선은 프라이버시 범위가 명확하고 구현이 단순하다는 장점이 있는 대신, 쓸 수 있는 상황이 제한된다는 단점이 있습니다.

화면 공유가 잘 안 될 때는 어떻게 하나요?

원인은 대개 권한, 네트워크, 캡처 방지 세 갈래입니다. 증상별 대처는 다음과 같습니다.

  1. 공유 버튼이 회색 / 눌러도 반응 없음: macOS ‘시스템 설정 - 개인정보 보호 및 보안 - 화면 기록’에 Gemini가 체크되지 않았습니다. 허용한 뒤에는 Gemini를 완전히 종료했다 다시 열어야 적용됩니다.
  2. 공유 표시는 뜨는데 ‘화면이 안 보인다’고 답함: 이미지 업로드가 실패했습니다(네트워크 불안정). 회선을 확인하고, 사내망이라면 generativeai.googleapis.com이 막혀 있는지 확인하세요.
  3. 공유한 창이 까맣게 나옴: 대상 앱이 DRM 또는 캡처 방지를 켰습니다. Netflix, Apple TV+, 1Password 잠금 해제, 일부 은행 앱에서 흔합니다. 시스템 차원의 보호라 우회할 수 없습니다.
  4. 다중 모니터에서 엉뚱한 화면을 고름: 드롭다운에서 디스플레이 그룹을 하나씩 펼치면 선택할 때 해당 화면의 메뉴 막대가 강조됩니다.
  5. 공유가 눈에 띄게 느림: Retina 4K 외장 화면은 이미지가 커서(3~6MB까지) 업로드가 느립니다. 내장 화면으로 바꾸거나 외장 디스플레이 해상도를 낮추세요.
  6. 오래된 스냅숏을 기준으로 답함: 새 스냅숏은 새 메시지를 보낼 때만 캡처됩니다. 최신 화면을 보여 주려면 공유 버튼을 한 번 더 누르세요.
  7. 창을 바꾸니 공유가 끊김: 원래 창을 닫으면 macOS가 공유를 자동 중지합니다. 새 창을 다시 선택하면 됩니다.
  8. 개인 정보를 실수로 올림: 공유 중 민감한 내용이 보이면 즉시 중지하세요. 다만 그 한 장은 이미 전송된 상태입니다. Google 계정 설정에서 Gemini 활동을 삭제하면 기록을 지울 수 있습니다.

GeminiDesktop은 이 문제를 어떻게 푸나요?

GeminiDesktop은 Tauri로 만들어 macOS ScreenCaptureKit API에 직접 접근하고, 시스템 차원의 효율적인 화면 캡처로 다중 모니터와 고 DPI도 정확히 처리합니다.

로드맵의 핵심은 상시 관찰 모드입니다. 계속 캡처해 Live API로 흘려보내기 때문에, 질문하는 시점에 Gemini는 현재 화면만이 아니라 그 상태에 이르기까지의 조작 흐름이라는 완전한 맥락을 갖습니다. 세밀한 프라이버시 제어로 AI가 무엇을 볼지는 사용자가 정합니다.

구체적인 차이는 이렇습니다.

  • ‘영역 지정’ 공유 지원(드래그로 임의의 사각형 선택)으로 프라이버시 단위가 더 정밀함
  • 여러 창 동시 공유 지원(최대 4개)으로 앱 횡단 작업을 보여 줄 수 있음
  • ‘민감 내용 가리기’ 내장 — 비밀번호 입력란, 카드 번호를 자동으로 가려 전송
  • 로컬 캐시 모드 선택 가능 — 스크린샷을 먼저 로컬에 저장하고 명시적으로 확인한 뒤 전송

Windows에서는 어떻게 화면 공유를 하나요?

Windows에는 Gemini 채팅 클라이언트 자체가 없어서 대체 앱을 써야 합니다. 2026-04-14에 나온 Google app for desktop은 로컬 파일 검색은 되지만 Gemini 채팅 앱이 아니며 화면 공유 기능도 없습니다. 자세한 내용은 Google은 Gemini Windows 앱을 만들지 않았다Gemini Windows app vs Google app for desktop를 보세요.

Windows에서 동등한 경험을 원한다면 선택지는 다음과 같습니다.

  • GeminiDesktop for Windows는 화면 공유를 네이티브로 지원하고 Live API 기반 지속 관찰 모드를 갖췄습니다. 네이티브 Gemini Windows appGemini Windows 설치 가이드 참고
  • Claude Desktop for Windows + Cowork는 가상 데스크톱 단위의 화면 협업을 제공합니다. 성격은 다르지만 일부 상황은 커버합니다
  • ChatGPT Desktop for Windows는 Voice + Vision을 갖춰 Gemini가 앞으로 지향하는 Live 경험에 가장 가깝습니다

더 잘 쓰는 방법은 무엇인가요?

공식 버전의 제약은 캡처 방식과 공유 순서를 바꾸는 것만으로 상당 부분 우회할 수 있습니다.

  1. 스크린샷과 조합: ⌥ ⇧ 4로 영역을 클립보드에 캡처한 뒤 Gemini 채팅창에 붙여넣습니다. 공유 권한 절차를 우회하고 창 전체의 불필요한 정보도 올리지 않게 됩니다
  2. 특정 영역만 보여 주기: 공식 버전은 영역 지정 공유를 지원하지 않으니, 분석할 내용을 먼저 별도의 Preview 창으로 복사한 뒤 그 창을 공유합니다
  3. 여러 장면 비교: 첫 장면을 공유해 질문하고, 수동으로 다음 상태로 바꾼 뒤 다시 공유합니다. Live 스트림은 아니지만 연속 메시지로 ‘흐름 관찰’을 흉내 낼 수 있습니다
  4. Canvas와 연동: 디자인 시안 창을 공유하면서 “이 레이아웃을 HTML로 바꿔 줘”라고 요청하면, Gemini가 이해한 내용을 Canvas에 써서 조정 가능한 코드로 만들어 줍니다
  5. 화면 공유 + Deep Research: 먼저 기사 창을 공유해 주제를 이해시키고 나서 Deep Research를 요청하면 전문을 복사·붙여넣는 단계를 아낄 수 있습니다

FAQ

Q1: 화면 공유는 계속되나요, 한 번뿐인가요? Gemini for Mac 초기 버전은 단발 스냅숏으로, 메시지를 보낼 때마다 한 프레임을 캡처합니다. Live 지속 스트림이 아닙니다.

Q2: 화면 공유가 데이터나 토큰을 소모하나요? API 사용 한도를 소모합니다. 이미지 입력은 토큰으로 과금되며 표준 해상도 이미지 한 장이 대략 250~500 토큰입니다. Google AI Studio의 Gemini 2.5 Pro는 100만 토큰당 약 $1.25입니다. 구독 사용자에게는 별도 한도가 있습니다.

Q3: Gemini가 내 화면을 조작하게 할 수 있나요? 할 수 없습니다. Gemini for Mac 초기 버전에는 Computer Use가 없어 보기만 되고 조작은 안 됩니다. 조작이 필요하다면 용어: Computer Use를 참고하세요.

Q4: Intel 맥에서도 화면 공유가 되나요? Google의 Gemini for Mac은 Apple Silicon만 지원합니다. Intel 사용자는 Gemini for Mac의 Apple Silicon 전용 제약을 참고하세요. GeminiDesktop은 Intel도 지원하며 화면 공유 경험은 동일합니다.

Q5: 공유한 화면 데이터가 Google 모델 학습에 쓰이나요? 현재 Google 정책상 유료 Gemini 구독자의 대화 데이터는 기본적으로 학습에 쓰이지 않고, 무료 사용자 데이터는 학습에 쓰일 수 있습니다. 자세한 내용은 Google 개인정보 정책이 기준입니다.

Q6: Zoom 같은 화면 공유와 같은 것인가요? 아닙니다. Zoom의 화면 공유는 다른 사람에게 영상을 보내는 것이고, Gemini의 화면 공유는 프레임을 AI 추론에 넘기는 것입니다. 목적지도 처리 방식도 완전히 다릅니다.

함께 읽기

간극 메우기

공식 앱의 화면 공유는 정지 스냅숏뿐입니다. 지속 관찰 기술은 이미 Live API에 존재합니다. GeminiDesktop은 이 간극을 메웁니다. 네이티브 화면 캡처, Live API 지속 스트리밍, 그리고 손을 작업에 남겨 두는 음성 조작입니다. GeminiDesktop 사용해 보기.

'기능과 용어' 글 19편 모두 보기 →

이 AI 도구를 사용해 보세요