AI · AOS · 제품 제작

Flowy

실시간 시각 보정과 음성 안내를 담은 Android 카메라 앱

제품 이야기

저시력 보조 카메라

Flowy는 저시력 사용자가 스마트폰 카메라로 주변 정보를 확인하는 Android 앱입니다.

신한 퓨처스랩 7-1기에 선정된 스타트업 오버플로우에서 이 프로젝트의 설계와 개발을 전담했고, 과기정통부 AI 바우처 지원사업 선정 과제로 버스번호 인식 모델을 앱에 적용했습니다.

실시간 카메라 화면에 시각 보정 필터를 적용하고 서버에서 받은 버스 번호 인식 결과를 TTS로 안내합니다.

실시간 인식 구조

정류장에서 작은 버스 번호를 바로 읽기 어려운 저시력 사용자

실제 버스 번호 인식 영상

01CameraX

02OpenGL 보정

03인식 서버

04WebSocket

05번호 오버레이

06TTS

실시간 OpenGL 보정

사진을 찍고 기다리지 않고 카메라를 보는 동안 대비와 색상을 보정합니다.

인식 결과를 화면과 음성으로 제공

WebSocket으로 받은 번호를 크게 표시하고 TTS로 읽습니다.

음성 안내 동작

카메라로 인식한 정보를 화면과 음성으로 안내합니다.

손가락 트래킹

카메라 안에서 손가락 위치를 추적하는 테스트 영상입니다.

CameraX 영상에 시각 보정 필터를 적용하고 서버에서 받은 번호를 화면 위에 표시합니다.

구현 범위 자세히 보기