발표 자료

1. 개요

2. 프로젝트 추진배경

우리는 소리를 통해 주변 상황과 위험을 감지할 수 있다. 예를 들어 화재경보기가 울리면 화재가 난 것을 인지하고 밖으로 대피할 수 있다. 하지만 청각 장애, 난청, 노화로 인해 청각적 신호를 인지 못하는 경우 문제가 생긴다. 특히 청각장애인은 언어장애를 동반한 경우가 많아 의사소통이 힘들어 도움 요청에 어려움이 있을 수 있다. 이런 경우 대신 중요한 소리를 듣고 소리를 다른 방식으로 인식 시켜주며 위급 상황 시 구조 요청하는 과정이 필요하다. CCTV 와 같이 시각 정보를 바탕으로 구성되는 시스템은 사람이 직접 상황을 인식해야 하고, 사각지대가 있는 등 한계가 있다. 이를 보조하기 위한 수단으로 IoT와 지능형 소리 분석 기술이 이용될 수 있다. 소리는 전방위로 퍼지기 때문에 사각지대가 상대적으로 적다. 위험상황임을 알리는 특정 소리(비명소리, 파열음 등)를 자동으로 분류하여 사용자에게 알리는 것으로 즉각적인 보호 서비스를 제공할 수 있다.

3. 프로젝트(주제) 목표 및 내용

※ 팀별 활동을 통해 최종적으로 달성하기 위한 목표를 기술

(최종 결과물의 모습과 학습성과를 고려하여 작성)

임베디드 장치 내의 마이크에서 소리를 입력받고 TnyML을 통해 기기 내에서 직접 소리를 분류한다. 주변 소리 정보를 모바일 장치로 전송하고 사용자에게 알림으로써 상황인식의 편의성을 제공하고, 위험 상황을 인지할 경우 경고 알람을 통해 사용자의 빠른 대처를 돕는다. 결과적으로 청각 장애인, 난청인, 노인 등 소리를 인식하는데 어려움을 겪는 사람들을 위한 스마트홈을 구축할 수 있다. 제작 과정에서 인공지능 모델 생성, 회로 제작, 임베디드 장치와 모바일 장치 간의 통신, 임베디드 장치 내에 TinyML을 적용시키는 방법 등에 대한 지식을 학습 및 활용할 수 있다.

5. 주요기능

소리인식 및 분류

노크 소리, 아기 울음 소리, 초인종 소리, 물 끓는 소리, 사이렌 소리 등 인지해야 할 상황이나, 긴급한 상황에서 필히 들어야 할 소리를 인지하여 구분할 수 있다.

모바일 알림

긴급한 상황에서 사용자가 인지하지 못했을 경우 소리를 인지하여 긴급상황을 신속히 알린다.
긴급 호출을 지원한다.
알림소리, 플래시, 진동을 통해 사용자에게 알림을 보낸다.

IoT제어

노크 소리, 초인종 소리 같은 경우, 인터폰의 방문자를 원격으로 확인한다.
유리창이 깨지는 등 침입이 의심되는 소리, 아기 울음소리가 날 경우 카메라를 이용해 사진을 찍어서 원격으로 상황을 확인한다.