폰 카메라를 비추면 Gemini가 말로 설명해요, 시각장애인을 위한 'Guided Vision' 안드로이드에 적용
Gemini Live에서 카메라를 공유하면 작은 글씨·물건 위치·주변 모습을 소리로 알려 주고, 화면이 빗나가면 카메라를 어떻게 옮길지도 말해 줘요. 안드로이드 9 이상에서 순차 적용 중이에요.
- Guided Vision은 Gemini Live(Gemini와 음성으로 실시간 대화하는 기능)에 카메라를 공유하면 보이는 것을 말로 설명해 주는 기능이에요. 시각장애·저시력인과 함께 만들었다고 구글이 밝혔어요.
- 카메라가 너무 높거나 가깝거나 옆으로 치우치면 "오른쪽으로 천천히", "아래로 기울여요", "한 걸음 물러나요"처럼 말로 다시 맞추게 도와줘요.
- 안드로이드 9 이상, Gemini Live가 되는 지역·언어에서 쓸 수 있고 순차 적용 중이에요. 길 안내·장애물 확인용은 아니라고 구글이 분명히 적었어요.
어두운 매장에서 작은 성분표·가전 다이얼·세탁기 코스 글씨를 읽어야 할 때 폰 카메라만 비추고 말로 물어볼 수 있어요. 눈이 침침한 부모님 폰에 켜 두기에도 좋아요.
카메라를 비추며 대화하는 AI가 '화면 맞추는 법'까지 말해 주는 흐름은 음성 AI 사용법 영상이나 접근성 소개 콘텐츠의 좋은 예시예요.
앱을 만든다면 안드로이드 접근성 단축키(볼륨 키 두 개 길게 누르기 등)와 TalkBack(안드로이드 화면 읽기 기능) 메뉴에서 바로 여는 방식을 참고해 볼 만해요.
1) Gemini 앱과 안드로이드를 최신으로 업데이트 2) Gemini 앱 → 위쪽 프로필 사진 → 설정 → 'Use Guided Vision in Live' 켜기 3) Gemini Live를 열고 카메라 공유 4) 작은 글씨에 비추고 "여기 뭐라고 써 있어?"라고 묻기 — 화면이 빗나가면 Gemini가 말하는 대로 카메라 옮기기 5) 자주 쓸 거면 설정 → 접근성 → Vision assistance → Guided Vision에서 단축키 켜기
작은 글씨를 자주 읽어야 하는 분이나 눈이 침침한 부모님 폰에 먼저 켜 두면 좋을 것 같아요. 아직 순차 적용 중이라 설정에 메뉴가 없으면 조금 기다려 보는 게 좋을 것 같아요.
구글이 Gemini Live에 Guided Vision을 넣었어요. 구글 블로그(10월 1일 자)는 "오늘부터 호환되는 안드로이드 기기에 출시한다"고 했고, Gemini 앱 공식 X는 10월 6일(현지 시간) 데모 영상과 함께 알렸어요. 시각장애인, 저시력인, 또는 쉽게 시각 도움을 받고 싶은 사람을 위한 기능이에요.
어떻게 동작하나 — Guided Vision을 켠 상태로 Gemini Live에서 카메라를 공유하면, Gemini가 보이는 것을 소리로 설명하고 이어지는 질문에도 답해요. 카메라가 너무 높거나 가깝거나 옆으로 조금 비켜 있으면 "오른쪽으로 천천히 돌려요", "아래로 기울여요", "뒤로 물러나요"처럼 말로 다시 맞추게 도와줘요.
어디에 쓰나 — 구글이 든 예시는 이래요.
- 작은 글씨 읽기: 식품 영양성분표, 가전 다이얼·세탁기 코스, 어두운 식당의 인쇄 메뉴판
- 물건 찾기: 바닥에 떨어진 이어폰, 꽉 찬 양념 선반 속 후추
- 물건 설명·맞춰 보기: 줄무늬 셔츠가 바지와 어울리는지, 재킷 색이 뭔지
- 주변 둘러보기: 낯선 공간, 방 배치, 탁자 위 물건들
- 여러 언어로 대화: 인도·브라질·싱가포르·인도네시아·일본 등의 시각장애·저시력 커뮤니티에서 시험하고 의견을 받았대요
어떻게 만들었나 — 구글은 Aira와 협력해 모두 합쳐 수만 시간 분량의 데이터를 시각 해석했다고 밝혔어요. Aira의 시험 사용자(Trusted Tester) 1,000명 넘게 일상에서 모델을 시험하고 다듬었고, Aira 전문가들이 안전 장치를 정하고 평가하는 데 참여했어요.
켜는 법 — 세 가지 길이 있어요.
- Gemini 앱: 프로필 설정에서 'Use Guided Vision in Live'를 켜고, Gemini Live에서 카메라 공유
- 접근성 단축키: 안드로이드 설정 → 접근성 → Vision assistance → Guided Vision에서 단축키를 켜면 떠 있는 접근성 버튼, 두 손가락으로 위로 쓸기, 볼륨 키 두 개 누르기로 바로 시작
- TalkBack(안드로이드 화면 읽기 기능): 세 손가락 탭으로 TalkBack 메뉴를 열고 Guided Vision 선택
누가 쓸 수 있나 — 안드로이드 9 이상 기기에서, Gemini Live가 지원되는 지역과 언어라면 쓸 수 있어요. Gemini 앱과 안드로이드를 최신으로 업데이트해야 하고, 구글 도움말에는 천천히 순차 적용 중이라 아직 안 보일 수 있다고 적혀 있어요.
다만 — 구글은 Guided Vision이 틀릴 수 있고, 의료기기·보행 보조기구·흰 지팡이를 대신하지 않으며 길 안내·안전한 이동·장애물 감지용이 아니라고 분명히 적었어요. 노인, 글을 읽기 어려운 사람, 어두운 곳에서 작은 글씨를 읽어야 하는 누구에게나 도움이 될 수 있다고도 덧붙였어요.
X 게시물 보기 · https://x.com/GeminiApp/status/2107546530987286542
