Google이 스마트폰 카메라로 비추는 대상을 실시간 음성으로 설명하고 대화형으로 안내하는 AI 시각 보조 기능인 Guided Vision을 Gemini Live에 공식 출시했습니다.12 Guided Vision은 Android 9 이상을 탑재한 호환 기기에서 사용할 수 있으며, 시각장애인과 저시력자를 포함해 실생활에서 직관적인 시각 도움이 필요한 모든 사용자에게 주변 환경을 음성으로 전달하도록 설계되었습니다.12 카메라 화면을 공유하면 사용자의 질문에 답할 뿐만 아니라, 어두운 식당의 메뉴판이나 작은 영양성분표를 읽고 떨어진 물건의 위치를 찾는 등 일상의 다양한 순간을 보조합니다.123
Gemini 공식 로고. Source: Google. 원본 및 출처 · 이미지 이용 조건. Google 및 제품 상표는 Google LLC의 상표입니다. 이 글은 Google과 제휴하거나 Google의 후원을 받아 작성되지 않았습니다.
카메라 구도를 바로잡는 대화형 시각 보조의 작동 원리
Guided Vision의 가장 큰 변화는 단방향 이미지 분석에 머물지 않고, 연속적인 대화와 실시간 카메라 구도 안내를 결합했다는 점입니다.12 사용자가 Gemini Live 세션 중에 카메라 공유를 활성화하면, Gemini가 카메라에 들어오는 사물과 주변 공간을 지속적으로 추적하고 해석합니다.123
이 과정에서 카메라가 대상에 너무 가깝거나 한쪽으로 치우쳐 필요한 시각 정보가 잘리면, Google의 AI가 "오른쪽으로 천천히 이동하세요", "아래로 기울이세요", 또는 "뒤로 물러서세요"와 같은 구체적인 음성 안내를 제공합니다.12 사용자가 AI의 안내에 따라 스마트폰 각도를 조정하여 정밀한 시각 맥락을 확보하면, "이 제품의 유통기한을 읽어줘" 또는 "이 상의의 색상이 하의와 어울려?"와 같은 후속 질문을 자연스럽게 이어갈 수 있습니다.12
시각장애인 커뮤니티 및 Aira와의 파트너십을 통한 실전 검증
Guided Vision은 기획 단계부터 시각장애인 및 저시력자 커뮤니티와 긴밀히 협력하여 개발되었습니다.2 Google은 전문 시각 보조 서비스 제공 기관인 Aira와 파트너십을 맺고, 수만 시간에 달하는 시각적 데이터 해석 학습을 Gemini Live에 반영했습니다.2
모델의 정확도와 실용성을 검증하기 위해 Aira의 Trusted Tester 네트워크 소속 회원 1,000명 이상이 참여하여 일상생활 전반에서 모델을 직접 테스트하고 다듬는 작업을 진행했습니다.2 또한 Aira 전문가들은 Google 개발팀과 협력해 안전 가드레일을 수립하고 평가하는 주체로 참여했습니다.2 여기에 더해 인도, 브라질, 싱가포르, 인도네시아, 일본 등 다양한 국가의 커뮤니티 피드백을 수용하여, 다국어 환경에서도 자연스러운 대화와 구도 안내 음성이 제공되도록 다듬었습니다.2
주요 활용 장면과 접근성 설정 방법
Guided Vision은 빠른 시각적 확인이 필요한 일상의 여러 환경에서 다채롭게 활용될 수 있습니다.2
텍스트 읽기 및 번역: 식품 포장재의 미세한 영양성분표, 세탁기나 가전제품 조작부, 어두운 조명의 식당 메뉴판, 복잡한 표지판을 음성으로 읽어줍니다.123
물체 찾기 및 위치 파악: 양념장 안의 후추병이나 바닥에 떨어진 이어폰처럼 찾기 힘든 소형 물체의 정확한 위치를 음성 안내로 찾아줍니다.123
물체 속성 설명 및 의상 조합: 옷의 색상, 패턴, 모양을 설명받아 의상 조합이 적절한지 파악하거나 정밀한 세부 특징을 확인할 수 있습니다.123
주변 공간 파악: 낯선 방의 구조나 테이블 위에 배치된 물품 상태에 대한 개요를 종합적인 음성 설명으로 전달받습니다.123
사용자는 안드로이드 기기에서 세 가지 경로로 Guided Vision을 실행할 수 있습니다.123
Gemini 앱 내부 설정: Gemini 모바일 앱의 프로필 설정에서 'Live에서 Guided Vision 사용'을 활성화한 후 Gemini Live 세션을 시작하고 카메라 공유를 누릅니다.23
Android 접근성 단축키: Android 설정의 "접근성 > 시각 보조 > Guided Vision" 경로에서 단축키 옵션을 켭니다.23 화면의 플로팅 접근성 버튼, 화면 아래에서 두 손가락으로 위로 쓸어넘기는 제스처, 또는 양쪽 볼륨 키를 동시에 길게 누르는 방법 중 선택할 수 있습니다.123
Google TalkBack 연동: Android 화면 읽기 도구인 Google TalkBack을 사용하는 경우, 세 손가락으로 화면을 탭하여 Google TalkBack 메뉴를 연 뒤 Guided Vision을 직접 선택해 시작할 수 있습니다.123
안전상 한계와 필수 유의 사항
Guided Vision은 뛰어난 실시간 시각 보조 기능을 제공하지만, 생성형 AI의 특성상 오류나 잘못된 해석을 발생시킬 수 있습니다.12 따라서 제공되는 음성 설명을 절대적인 사실로 단정해서는 안 됩니다.12
Google은 Guided Vision이 의료 기기나 보행 보조 기구가 아니며, 흰 지팡이나 기존 보행 보조 도구를 대체할 수 없음을 분명히 밝히고 있습니다.123 특히 보행 내비게이션, 안전한 이동 안내, 장애물 감지 목적으로 Guided Vision에 의존해서는 안 됩니다.123 물리적 환경에서의 이동 안전과 종합적인 상황 판단은 사용자가 직접 기존의 이동 보조 도구와 신중한 안전 수칙을 준수하며 수행해야 합니다.23
사용자 판단 기준과 도입 전 점검 사항
Guided Vision은 시각장애인 및 저시력자의 일상적 자립을 돕는 도구일 뿐만 아니라, 어두운 공간에서 세부 표기를 확인해야 하는 노년층이나 직관적인 시각 보조가 필요한 모든 사용자에게 유용한 보조 수단입니다.12
이 기능을 도입하기 전 독자가 확인해야 할 기준은 다음과 같습니다. 첫째, 사용 중인 스마트폰이 Android 9 이상이며, Gemini 앱과 시스템 소프트웨어가 최신 버전으로 업데이트되어 있는지 점검해야 합니다.12 둘째, 해당 지역과 사용 언어가 Gemini Live 환경을 지원하는지 확인해야 합니다.12 셋째, 이동 중 장애물 감지나 보행 안내가 아닌, 정지 상태에서 물품 식별, 미세 텍스트 판독, 공간 개요 파악 등 안전한 보조 용도로 제한하여 활용해야 합니다.123
참고
1Google's new Guided Vision feature can help you read the fine print
이 노트는 보도·비평·교육·연구 목적으로 작성되었습니다. 저작권 문의가 있으시면 에서 알려주세요.