Live와 Stream으로 실시간 AI 협업하기

화면을 함께 보는 AI 동료

Google AI Studio는 Gemini 모델을 웹에서 실험하고 앱으로 확장할 수 있는 작업 공간이다.¹ 지금까지는 프롬프트를 쓰고 결과를 확인하는 방식에 익숙해졌다면, Live 또는 Stream Realtime은 한 단계 더 나아간다. 마이크, 웹캠, 화면 공유를 켜고 Gemini와 실시간으로 대화한다. 즉, "이 화면을 어떻게 설명하지?"라는 부담을 줄이고, AI가 현재 화면 맥락을 보며 도와주게 만드는 기능이다.

이 기능의 핵심은 텍스트 설명이 아니라 공유된 상황이다. 엑셀 수식 오류, 코드 에러 메시지, 디자인 도구의 버튼 위치, 복잡한 설정 화면처럼 말로 풀어 쓰기 어려운 문제일수록 효과가 크다. Google의 Live API 문서도 AI Studio에서 Stream을 선택해 실시간 음성·영상 기반 상호작용을 시험해 볼 수 있다고 안내한다.²

기본 사용 흐름

AI Studio에서 Live 또는 Stream Realtime 화면으로 들어간 뒤, 사용할 입력 방식을 고른다. 보통은 마이크로 말하기, 웹캠으로 보여주기, 화면 공유하기 같은 방식으로 시작한다. 실제 버튼 이름과 위치는 업데이트에 따라 달라질 수 있지만, 기본 흐름은 비슷하다.

화면 공유를 사용할 때는 다음 순서로 진행한다.

1. 마이크 권한을 허용한다.

2. 필요하면 웹캠도 켠다.

3. Share screen 또는 Share your screen에 해당하는 화면 공유 기능을 선택한다.

4. 전체 화면, 특정 창, 브라우저 탭 중 하나를 고른다.

5. Gemini에게 현재 화면 기준으로 질문한다.

6. 작업이 끝나면 공유 중지 버튼이나 세션 종료 버튼으로 연결을 끊는다.

가능하면 전체 화면보다 특정 창이나 탭만 공유하자. 필요한 정보만 보여주는 것이 안전하고, Gemini도 더 좁은 맥락에 집중하기 쉽다.

질문은 "현재 화면 기준"으로 말하기

Live와 Stream에서는 질문 방식이 중요하다. "이거 왜 안 돼?"보다 "지금 보이는 표에서 오류가 난 셀을 찾아주고, 원인을 순서대로 설명해줘"가 낫다.

바로 쓸 수 있는 말하기 예시는 다음과 같다.

• "지금 보이는 구글시트에서 #N/A 오류가 난 이유를 찾아줘."

• "이 버튼 다음에 무엇을 눌러야 하는지 단계별로 알려줘."

• "화면의 에러 메시지를 읽고 원인, 확인할 파일, 수정 순서를 알려줘."

• "이 리포트 화면에서 핵심 지표 3개와 이상해 보이는 수치를 짚어줘."

• "현재 디자인에서 글자가 잘 안 보이는 부분을 찾아 개선안을 말해줘."

좋은 요청은 세 가지를 포함한다. 현재 보고 있는 대상, 원하는 목표, 답변 형식이다. 예를 들어 "이 화면을 분석해줘"보다 "현재 대시보드에서 매출 하락 원인으로 의심되는 지표를 3개만 골라줘"가 훨씬 정확하다.

실습 시나리오

가장 먼저 엑셀이나 구글시트를 열어보자. 일부러 오류가 있는 함수나 복잡한 표를 만든 뒤 Gemini에게 "오류 셀을 찾고 수정 공식을 제안해줘"라고 말한다. 단, 화면 인식은 완벽한 데이터 추출 도구가 아니다. 숫자가 작거나 표가 복잡하면 잘못 읽을 수 있으므로 중요한 계산은 사용자가 다시 확인해야 한다.

다음은 웹사이트나 리포트 분석이다. 경쟁사 페이지, 광고 성과 화면, GA 리포트 등을 공유하고 "눈에 띄는 문제점과 다음 액션을 알려줘"라고 요청한다. 디자인 도구에서는 캔바, 피그마, 포토샵 화면을 보여주며 버튼 위치나 레이아웃 피드백을 받을 수 있다. 개발자는 에디터나 터미널의 에러 메시지를 공유하고 "수정 전 확인할 가설을 우선순위로 정리해줘"라고 묻는 방식이 좋다.

실행 설정 이해하기

실시간 협업에서는 설정이 체감 품질을 크게 바꾼다. 화면에 따라 모델, 음성, 미디어 품질, 세션 맥락 같은 옵션이 표시될 수 있다. 이름은 조금씩 바뀔 수 있으므로, 각각이 무엇을 조절하는지만 이해하면 된다.

미디어 품질 또는 해상도 설정은 화면을 얼마나 자세히 볼지에 영향을 준다. 작은 글씨가 많은 표, 코드, 에러 메시지는 높게 잡는 편이 좋다. 대신 응답이 느려질 수 있다. 큰 버튼 위주의 웹 화면이나 단순한 디자인 검토라면 낮춰도 충분하다.

Voice는 Gemini가 답하는 음성이다. 장시간 들을 목소리이므로 부담 없는 톤을 고른다.

대화 턴과 세션 맥락 관련 설정은 사용자의 발화, AI 응답, 이전 대화의 이어짐에 영향을 줄 수 있다. 같은 문서나 코드 문제를 오래 다룰 때는 맥락을 이어가면 편하다. 반대로 주제를 자주 바꾸거나 민감한 내용이 섞이면 새 세션으로 나누는 편이 안전하다.

공유 전 보안 체크

화면 공유 전에는 30초만 점검하자. 고객 정보, 사내 문서, 계정 정보, API 키, 결제 화면, 메신저 알림, 브라우저 탭 제목, 파일명은 의도치 않게 노출되기 쉽다. 필요 없는 창은 닫고, 알림은 끄고, 민감한 값은 가린다. 특히 API 키나 비밀번호가 보이는 개발 화면은 공유하지 않는 습관을 들여야 한다.

Gemini가 화면을 함께 보더라도 최종 판단은 사용자 몫이다. 중요한 설정 변경, 코드 수정, 데이터 삭제, 고객 정보 처리 전에는 "왜 그렇게 판단했는지 근거를 설명해줘", "다른 안전한 방법은 없어?"라고 한 번 더 확인하자. Live와 Stream은 대신 결정해주는 기능이 아니라, 현재 화면을 함께 보며 시행착오를 줄여주는 협업 도구다.

참고

¹Google AI Studio 소개

²Live API capabilities guide | Gemini API | Google AI for Developers