| 연구내용 |
"1) AI 음성인식을 활용한 실시간 자막 모바일 어플리케이션 상용화
- 기존 PC 소프트웨어, 태블릿 앱으로 제공했던 음성인식 프로그램의 모바일화 기획, 디자인, 개발
- 양방향 소통 기능, 수업에 특화된 학습기능 탑재
- 교과목별 특화하여 음성인식 AI 엔진 인식률 강화
- 개발 완료 직후 최소 한 학기 (3개월) 동안의 수업 내 활용 현장 실증 진행
- 국내 교육청과 대학교에 시판하여 상용화
2) AI 음성인식 어플리케이션과 동시 연동하여 소리와 자막의 동시 수신이 가능한 FM/BT 복합 중계기 상용화
- FM을 통해 음성을 수신하여 개인 보장구에 전달함과 동시에 블루투스 통신으로 음성인식 디바이스에 함께 전송하는 휴대형 무선 중계기
- 디자인, 기구설계, HW 개발, 펌웨어 개발, 상용화 준비
- 개발 완료 직후 최소 한 학기 (3개월) 동안의 수업 내 사용 현장 실증 진행
- 국내 교육청과 대학교, 기존 인공와우등 FM 수신 중계기로 시판하여 상용화
3) 다중이용시설용 액자형 인덕션 히어링루프 상용화
- 원거리 송신이 가능한 벽걸이형 히어링루프 시제품 제작 (기존의 루프케이블 매립형의 히어링 루프를 벽걸이 액자형으로 개발)
- 전체 기능 설계, 세부 구현 동작 시나리오 제작
- 디자인, 기구설계, HW 개발, 펌웨어 개발, 상용화 준비
- 공인시험기관 실험을 통한 정량적 성능 평가
- 교통이용 및 다중이용시설, 학습 사용 현장 실증 진행, 개발 기간 내 상용화
- 국내“ 노인 장애인 편의 증진법 ”및 “교통약자 편의 증진법”등 의무설치 의거 교통이용시설 및 수단, 다중이용시설등에 시판
4) FM/BT 중계기 연동 손실청력 보완 음성증폭 스마트 이어셑 시제품 제작
- 손실청력을 보완하여 주는 블루투스 기능 내장 스마트 이어셑
- 디자인, 기구설계, HW 개발, 펌웨어 개발
- 디지털 음성 증폭기능 및 자가 Fitting 기능 실증 테스트
5) AI 자동 상황 인지 기능이 탑재된 어플리케이션 시제품 제작
- 소리 분류별 (울음소리, 화재경보, 벨소리) 데이터 수집/생성 계획 수립
- 기초 기술 검토, 상황인지 엔진의 성능 평가
- APP 기획, UX/UI 디자인, 모바일 어플리케이션 프로토타입 개발
- 지역사회 내 농인 사용자 10 명의 가정 내 사용 환경 평가 진행" |
| 연구목표 |
"본 과제 연구를 통해 다양한 환경에서 간편하게 이용할 수 있는 청각보조기기 3종의 상용화 및 2종의 시제품 개발을 목표로 하며, 이는 서로 유기적으로 연동되어지는 통합 시스템으로 세부 항목은 아래와 같음
1) [상용화] AI 음성인식을 활용한 실시간 자막 모바일 어플리케이션 상용화
2) [상용화] AI 음성인식 어플리케이션과 동시 연동하여 소리와 자막의 동시 수신이 가능한 FM/BT 복합 중계기 상용화
3) [상용화] 다중이용시설용 액자형 인덕션 히어링루프 상용화
4) [시제품] FM/BT 중계기 연동 손실청력 보완 음성증폭 스마트 이어셑 시제품 제작
5) [시제품] AI 자동 상황인지 기능이 탑재된 어플리케이션 프로토타입 제작
1) 음성인식을 활용한 실시간 자막 모바일 어플리케이션 개발 및 고도화
- 말소리를 입력받아 실시간 자막으로 변환해서 보여주는 모바일 AI 음성인식 어플리케이션
- 학교 수업과 직무 환경에서 말소리에 대한 글자 정보를 제공하여 원활한 정보 수신을 돕고자 함
2) 소리와 자막의 동시 수신이 가능한 FM/BT 복합기능의 휴대형 중계기 개발
- FM을 통해 말소리를 수신하여 개인 보장구 (인공와우, 보청기) 로 전달함과 동시에 모바일 어플리케이션에도 연결할 수 있는 복합 수신기 개발
- 하나의 장치로 간편하게 소리 수신과 자막 송출의 연동이 가능하도록 복합 디바이스를 통해 사용편의성을 높이고자 함
3) 다중이용시설용 액자형 인덕션 히어링루프 개발
- FM을 통해 음성신호를 수신하여 개인 보장구 (인공와우, 보청기) 로 전달하는 벽걸이 액자형 히어링 루프로서, 다중이용시설에서도 안내 방송 오디오를 무선 수신할 수 있음
- 기존의 루프케이블은 바닥 또는 천정의 매립형으로 설치 소요 비용 부담이 높았으나, 본 연구를 통해 벽걸이 액자형으로 개발하여 비용 부담을 완화하고 간편하게 도입될 수 있도록 함
4) FM/BT 중계기 연동 손실청력 보완 음성 증폭 스마트 이어셑 개발
- 손실 청력을 보완하여 주는 블루투스 기반의 스마트 음성증폭기로서 사용자의 청력에 맞춰 스마트폰 APP을 통한 Self Fitting.
- 본 연구를 통한 스마트 이어셑은 기존의 음성 증폭기능이외에 FM/BT 중계기를 통해 다양한 환경에서의 소리정보를 무선으로 청취 할 수 있는 활용성 및 경제성이 뛰어남
5) 상황인지 기능이 탑재된 어플리케이션 개발
- 벨소리, 아이 울음소리, 화재경보 등을 감지하여 (Audio event detection) 진동과 빛 등으로 출력해주는 어플리케이션 개발
- 일상의 다양한 상황들을 인지하고 대처할 수 있도록, 활용 범위를 넓히고자 함
이를 통해 다음과 같은 문제 해결을 하고자 함
1) 다중이용시설, 가정, 학교에서의 다양한 상황에서 청각장애인은 소통의 어려움으로 인해 교육격차, 고용격차, 심리적 좌절을 겪음.
2) 이에 따라 무선으로 소리를 증폭하여 원활히 전달하고 동시에 실시간 자막으로 시각화하여, 상호 대화가 가능한 수준의 청각 보조기기 지원이 필요함.
3) 또한 대화 상황 이외에도 아기 울음, 화재 경보 등 특정 소리에 대한 인식이 어려워 상황 대처를 돕는 보조기기가 필요함.
4) 본 연구를 통해 간편한 장치와 소프트웨어의 구성으로서 전 생애주기에 걸친 청각장애인의 소통과 상황인지를 돕고자 함." |
| 기대효과 |
"1) AI 음성인식을 활용한 실시간 자막 모바일 어플리케이션 적용
- STT (Speech-to-text) 와 TTS (Text-to-speech) 의 양방향 소통 기능이 탑재된 모바일 어플리케이션 (안드로이드 OS) 출시
- [교육] 온/오프라인 학습 환경에서 교육 격차 해소를 위한 보조공학기기로서 활용됨. 교실에서 교사의 수업 내용을 실시간으로 변환하여 자막을 통해 이해를 돕고, 비대면 온라인 강의의 경우 컴퓨터에서 나오는 소리를 연결하여 자막 제공
- [직무] 직장에서 근무하는 청각장애인의 회의, 대면 대화 상황에서 활용하여 사내 소통에 누락이 없도록 지원함
2) 소리와 자막의 동시 수신이 가능한 FM/BT 복합기능의 휴대형 중계기의 적용
- [교육] 교실에서 교사가 FM 송신기를 착용하면 학생이 갖고 있는 중계기를 통해서 개인 보장구로 소리가 전달되고, 스마트폰에도 소리를 무선 전달하여 자막 어플리케이션에 입력을 제공함. 소리와 자막의 전체 정보들이 총체적으로 수신되어 교육 전달력을 높임
- [다중이용시설] 중계기 하나로 일상의 소리 수신 품질을 높이고, 자막을 동시에 연결할 수 있음. 교육뿐만 아닌 사회 전반의 인프라 구축에 활용을 목표함
- [개인] 기존의 블루투스 기능을 가진 인공와우나 보청 음성증폭기기에 연동되어 다중이용시설등 다양한 환경에서 의 소리정보 청취 FM 수신기로 활용
3) 다중이용시설용 액자형 인덕션 히어링루프의 적용
- 어느 곳에 가도 소리 정보의 전달 품질이 높아질 수 있도록 사회 전반의 인프라 구축을 목표함
- 설치가 간편한 저가의 벽걸이형 FM 히어링루프의 형태로 가격 경쟁력 확보 (90 % 절감 예상)
- 다중이용시설 (지하철, 공항 등)에서 안내 방송 오디오를 무선 수신할 수 있음
- 교육 및 문화 시설 편의 장치 적용벽걸이형 히어링 루프 방송 무선 청취 편의 환경 구축
- 종교 집회 시설 노인 장애인 무선 청취 편의 장치 제품화
- 새로운 상업적 광고 매채로의 경제성 기대
4) FM/BT 중계기 연동 손실 청력 보완 음성증폭 스마트 이어셑
- [개인] 노인 및 난청 장애인이 손실 청력을 보완하는 음성증폭기로 사용
- FM/BT 무선 중계기를 통해 학교 교육, 직장, 다중이용시설에서 FM으로 송출되는 음성 정보를 무선으로 청취 할 수 있음
5) AI 자동 상황 인지 기능이 탑재된 어플리케이션 개발
- 가정 내에서 한밤중 아기의 울음소리가 수신되면 침대/베개에 둔 스마트폰에서 강한 진동과 빛을 통해 상황을 알리고 청각장애인 부모가 대응할 수 있도록 함
- Audio Detection을 통한 상황인지 기능이 개인 스마트폰에서 구동되는 모바일 어플리케이션 (안드로이드 OS) 출시 후 구글 플레이스토어 업로드
- Audio Detection 이 이루어지는 형태를 기존 설치형 하드웨어 제품에서, 개인 모바일 기기 내 경량화 된 어플리케이션으로 작동되도록 하여 활용도 증대" |
| 연구개발성과 |
"주요 성과 증빙
1) 상용화제품 3종 완료 (액자형 히어링루프, 음성인식 APP, FM복합중계기), 연구 개발 성능 목표 달성
2) 시제품 2종 개발 완료 (상황인지 APP, 스마트이어셋), 연구 개발 성능 목표 달성
3) SW/HW 각 특허조사분석 보고서 1건
- 음성인식과 상황인지 관련 기술 동향 조사, 특허조사분석 수행
- 히어링 루프 및 FM 보청기기 제품 현황, 시장, 기술 동향 조사
4) 시제품별 개발 가이드라인 1건
- 다양한 상황에 맞는 음성인식과 상황인지(Audio Event Detection) 기술 검토 진행, 최적의 접근법으로 개발가이드라인 제작
- 하드웨어 전체 기능 설계, 세부 구현 동작 시나리오 제작
5) 사용성평가보고서 총 4건
- 액자형 인덕션 히어링루프 공공장소 설치 사용성 평가 (국내 학술대회 발표 1건)
- FM/BT 복합중계기 + 음성인식App 현장 실증 기반 교육환경 사용성 평가 (SCI급 저널 논문 1건)
- 스마트이어셑 사용성 평가 (해외 학술대회 발표 1건)
- 상황인식App 현장 실증 기반 유아돌봄 환경 사용성 평가 (KCI급 저널 논문 1건)
6) 미래비전컨셉영상 1건
7) 시제품/상용화 제품 특허출원 3건
8) 비즈니스모델 보고서 1건" |
