구현 형태
접근성 보조 Android 카메라 앱
제품 브리프
시각 장애의 일상 장벽을 허무는 AI 카메라 보조 앱, Flowy
저시력 사용자가 버스 번호 확인, 주변 사물 식별, 안전한 보행을 스마트폰 카메라 하나로 해결할 수 있도록, AI 기반 실시간 시각 보정 필터와 TTS 음성 안내를 통합한 Android 카메라 보조 앱입니다.
별도 보조 기기 없이 스마트폰만으로 대중교통 탑승과 야외 이동을 독립적으로 수행할 수 있게 되었습니다. 버스 정류장에서 노선 번호를 자동 인식해 음성으로 안내받고 안전하게 탑승에 잘 맞습니다.
구현 범위
해결한 문제
해결한 문제
저시력 장애인은 대중교통 이용과 야외 이동 시 시각 정보를 제때 파악하지 못해 독립적인 일상생활에 큰 어려움을 겪습니다.
핵심 구현
CameraX로 실시간 카메라 피드를 처리하고, OpenGL/GLSL 셰이더로 개인 맞춤 시각 보정 필터를 적용합니다. PyTorch AI 모델이 버스 번호를 즉각 인식하고, 손가락 트래킹으로 사용자가 가리키는 사물을 감지한 뒤 TTS로 음성 안내를 제공합니다.
결과
별도 보조 기기 없이 스마트폰만으로 대중교통 탑승과 야외 이동을 독립적으로 수행할 수 있게 되었습니다.
적합한 제품 유형
버스 정류장에서 노선 번호를 자동 인식해 음성으로 안내받고 안전하게 탑승
Deliverables
실시간 시각 보정 필터버스 번호 자동 인식손가락 사물 트래킹TTS 음성 안내CameraX 파이프라인
Tech
CameraX · OpenGL/GLSL · PyTorch · TTS
기술 구조
제품 근거
주 스택
Android · CameraX · OpenGL · PyTorch
데이터 · 동기화
실시간 인식 · 손가락 트래킹 · 음성 안내
운영 포인트
버스 번호 인식 · 카메라 필터 · 접근성 UX
스택
카메라 파이프라인
AndroidCameraXpreview pipelinereal-time overlays
시각 처리
OpenGL ESGLSL filtersPyTorchrecognition modules
보조 경험
voice guidancefinger trackingbus number recognitionaccessibility-first UI
연동
CameraXOpenGL ESGLSLPyTorchText-to-Speech
데모
실제 프로토타입 또는 운영 빌드에서 확인한 동작 흐름입니다.
Camera assist flow
Recognition flow
Finger tracking test
화면
제품 근거
앱
비슷한 제품, 내부 도구, 출시 가능한 첫 버전이 필요하다면
현재 문제, 대략적인 범위, 참고 링크만 있어도 제품 구조와 출시 범위부터 정리할 수 있습니다.