AI UPDATE·4 min read

Google, 카메라를 보며 실시간으로 설명하는 Gemini Live ‘Guided Vision’ 출시

Google이 Gemini Live에 실시간 시각 보조 기능 Guided Vision을 출시했다. 카메라로 주변을 보여주면 Gemini가 장면을 음성으로 설명하고, 대상을 제대로 볼 수 있도록 카메라 방향까지 말로 안내한다. 현재 Android 9 이상 호환 기기에서 이용할 수 있다.

Gemini Live Guided Vision이 스마트폰 카메라로 주변 환경을 실시간 분석하고 장면 설명과 카메라 방향 조정 음성 안내를 제공하는 모습을 표현한 이미지
Guided Vision은 Gemini Live에서 카메라 영상을 실시간으로 해석하고 장면 설명과 카메라 방향 안내를 음성으로 제공한다. 대표 이미지: DECHIVE 제작 · 내용 출처: Google

UPDATE DETAIL

무엇이 발표됐는가

Google은 2026년 10월 1일 Gemini Live의 새로운 접근성 기능 Guided Vision을 출시했다.

Guided Vision은 시각장애인과 저시력 사용자를 중심으로 개발된 대화형 실시간 시각 보조 기능이다. 사용자가 Gemini Live에서 카메라를 공유하면 AI가 주변 환경을 음성으로 설명한다.

기존 이미지 분석과 다른 핵심은 카메라가 필요한 대상을 제대로 담지 못했을 때 Gemini가 사용자의 움직임을 말로 안내한다는 점이다. 카메라를 오른쪽으로 천천히 움직이거나 아래로 기울이고, 조금 뒤로 물러나라는 식의 재구도 안내를 제공한다.

실제로 무엇을 할 수 있는가

  • 식품 포장의 작은 글씨와 영양 정보 읽기
  • 세탁기와 가전제품의 다이얼 확인하기
  • 어두운 식당에서 인쇄된 메뉴 읽기
  • 바닥에 떨어진 이어버드나 양념장 속 후추 찾기
  • 옷의 색상·패턴·형태 확인하기
  • 낯선 공간의 구조와 테이블 위 물건의 위치 설명받기

단순히 사진을 찍어 무엇인지 묻는 기능보다, 사용자가 실제 공간을 탐색하는 과정에 AI가 실시간으로 참여하는 방식에 가깝다.

어떻게 작동하는가

사용자는 Gemini Live 세션에서 카메라를 공유한다. Guided Vision은 실시간 카메라 정보를 해석하면서 음성으로 상황을 설명한다.

필요한 시각 정보가 부족하면 Gemini가 카메라를 움직이는 방법을 안내한다. 사용자가 카메라를 조정하면 Gemini는 새롭게 들어온 영상을 바탕으로 설명을 이어간다.

카메라 → AI 해석 → 음성 설명 → 카메라 조정 안내 → 새로운 영상 → 추가 설명

실제 사용자와 함께 개발

Google은 접근성 커뮤니티와 긴밀히 협력해 Guided Vision을 개발했다고 밝혔다.

시각 정보 해석 서비스 업체 Aira와 협력해 수만 시간 규모의 시각 해석 데이터를 활용했으며, Aira Trusted Tester 네트워크의 1,000명 이상이 일상 환경에서 모델을 테스트하고 개선했다.

Aira 전문가들은 안전 가드레일을 만들고 평가하는 과정에도 직접 참여했다.

이용 대상과 지원 환경

Guided Vision은 Android 9 이상을 실행하는 호환 Android 기기에서 사용할 수 있다. 단, Gemini Live가 제공되는 지역과 언어에서 지원된다.

Gemini 앱 설정에서 “Use Guided Vision in Live”를 켠 뒤 Gemini Live에서 카메라를 공유할 수 있다.

Android 접근성 설정에서는 플로팅 접근성 버튼, 두 손가락 스와이프 또는 양쪽 볼륨 키를 이용하는 바로가기를 설정할 수 있다. TalkBack 사용자는 세 손가락 탭으로 메뉴를 열어 Guided Vision을 실행할 수 있다.

출시 상태와 가격

  • Google 공식 발표: 2026년 10월 1일
  • 출시 상태: 정식 출시
  • 지원 환경: Android 9 이상 호환 기기
  • 지원 범위: Gemini Live 지원 지역과 언어

이번 공식 발표에는 Guided Vision 자체의 별도 가격이 명시되지 않았다. 따라서 무료 또는 유료 기능으로 단정하지 않고 실제 계정과 지역의 제공 조건을 확인해야 한다.

반드시 알아야 할 제한

Google은 Guided Vision을 보조 도구로 명시한다. 생성형 AI 특성상 실수할 수 있으며 의료기기가 아니다.

이동 보조기구나 흰지팡이를 대신하지 않으며 내비게이션, 안전한 이동 경로 안내 또는 장애물 감지용으로 설계된 기능도 아니다.

주변 환경 설명과 안전한 이동 안내는 반드시 구분해야 한다.

WHAT CHANGED

무엇이 바뀌는가

기존 방식

기존 AI 비전 기능에서는 사람이 사진을 찍거나 이미지를 올려 AI가 볼 수 있는 화면을 먼저 만들어야 했다. AI는 주어진 화면을 분석하고 질문에 답했다.

변경된 방식

Guided Vision에서는 AI가 입력을 얻는 과정에도 개입한다. 현재 화면이 충분하지 않으면 카메라를 오른쪽으로 옮기거나 아래로 기울이고, 조금 뒤로 물러나도록 음성으로 요청한다.

실제 영향

여기부터는 DECHIVE의 해석이다. 중요한 변화는 이미지 인식 성능 자체보다 AI가 필요한 정보를 얻기 위해 사람에게 다음 행동을 요청하기 시작했다는 점이다.

기존의 “사람 → 입력 → AI” 흐름이 “사람 ↔ AI ↔ 현실 환경”의 반복적인 상호작용으로 확장된다.

Physical AI나 로봇처럼 AI가 직접 몸을 움직이는 것은 아니지만, 사람의 카메라 움직임을 통해 현실 세계의 추가 정보를 능동적으로 확보한다는 점에서 의미가 있다.

WHAT WE CAN DO

이 변화로 무엇을 할 수 있는가

시각장애인·저시력 사용자

메뉴, 포장지, 가전제품 조작부, 옷과 주변 물체를 카메라로 보여주며 실시간 설명을 받을 수 있다.

작은 글씨 확인

식품 라벨이나 가전제품의 작은 표시처럼 육안으로 확인하기 어려운 정보를 읽어달라고 요청할 수 있다.

물건 찾기

찾는 물건을 말한 뒤 카메라를 움직이면 Gemini가 화면을 확인하고 더 잘 볼 수 있는 방향을 안내할 수 있다.

주변 환경 이해

낯선 방이나 테이블 위 물체의 배치를 설명받는 용도로 사용할 수 있다. 다만 환경 설명과 안전한 이동 안내는 다르며, 이동 보조나 장애물 감지에 사용해서는 안 된다.

일반 사용자

접근성 기술이지만 시각장애인에게만 제한되는 것은 아니다. 고령자, 문해력이 낮은 사용자 또는 어두운 환경에서 작은 글씨를 읽으려는 사용자에게도 도움이 될 수 있다.

← AI Update 목록