굴착기 내부 소음 dB과 비슷한 데시벨의 소음에서 STT 가 어떻게 동작하는지 확인 #18
Description
테스트 환경
Yotube에서 공사장 현장 영상의 소리를 60dB~70dB 사이로 설정한 환경에서 진행하였습니다.
명령어 집합중 같은 넘버에서 하나씩을 선택해 버그없이 기동된 10번의 테스트를 통해 정확도 판단을 진행하였습니다.
위 파일은 결과를 기술한 자료입니다.
버그 증상
종합적으로 테스트를 진행 해보았을때
버그들로 인한 진행에 어려움이 있었습니다.
현재 크게 발생하는 버그는 다음과 같습니다.
1.'hey volvo' 기동어 인식후 'yes' 대답이 나온 뒤 바로 꺼지는 증상
- 테스트 상황에서 가장 많이 발생하는 버그로 진행에 어려움이 큰 주요 버그입니다.
2.yes대답이 두번 나오면서 꺼지는 증상
-위와 비슷한 증상으로 yes 대답이 두번 나오면서 꺼지는 증상이 발생하는데
제 개인적인 견해로는 기동어 인식 단어를 여러가지로 설정하면서 충돌이 발생하는게 아닌가 생각합니다.
3.음성인식 tts에 'yes'대답이 들어가는 증상
-txt자료에서도 나타나 있듯 음성인식된 명령어에 기기에서 나오는 기동어 인식 대답인 'yes' 가 포함되는 증상이 발생했습니다.
yes는 현재 저희 앱에서 사용자가 말할 상황은 없으므로 필터링을 한다면 인식되지 않게 할 수 있을것으로 보입니다.
눈에 띄는 버그는 크게 3가지로 수정이 필요해 보입니다.
테스트 결과 분석
각 명령어 마다 정확도의 차이가 큰 편으로 나타났고
동일한 사용자가 일관된 dB로 명령어를 사용했음에도 같은 명령어 집합에서 tts가 다양하게 나타났습니다
이는 소음이 없는 상황에서 진행 했을때와는 큰 차이가 있는 것으로 나타나
소음 상황에서 나온 stt들의 문장을 학습시킬 필요성이 확인됩니다.
@jujuwon @ParkJeongmiin @KDW03 확인 해주시고 피드백 부탁드립니다.