매끄러운 전사에서 누락되는 짧은 필러를 보완하고, 발화 습관을 시간 근거가 있는 코칭 결과로 연결했다.
2026.07–08 · SSAFY 15기 공통 프로젝트 · 6인 팀 담당: 한국어 STT 설정·짧은 필러 보완·발화 이벤트·점수 산출 기술: Python, faster-whisper, Silero VAD, 피치·RMS 분석
발표 코칭에서는 문법적으로 자연스러운 전사보다 실제 발화의 필러·반복·쉼을 보존하는 것이 중요했다. 단어별 발화 시각이 포함된 전사를 바탕으로 필러 보완, 발화 이벤트 분석, 점수 산출 파이프라인을 구현했다.
발표·면접 서비스와 영상·내용 분석은 팀 전체 기능이다. 이 페이지는 담당한 한국어 STT·발화 분석 구현에 집중한다.
| 문제 | 직접 구현한 방식 | 코드 |
|---|---|---|
| 짧은 필러가 전사에서 빠짐 | 전체 전사를 유지하고 8초 독립 창을 재전사해 필러를 보완 | 필러 보완 |
| 같은 필러의 중복 검출 | 0.3초 이내 동일 검출을 하나의 이벤트로 병합 | 보완·병합 로직 |
| 전사문만으로 발화 습관을 구분하기 어려움 | 발화 구간(VAD)·피치·RMS와 단어별 발화 시각으로 필러·반복·쉼·말하기 속도를 분석하고 코칭 이벤트·점수를 산출 | 이벤트 · 점수 |
6개 후보를 같은 벤치마크 규격에 연결해 전사·이벤트 분석 시간과 자원 사용량을 같은 형식으로 수집하도록 만들었다. 최종 기본 모델은 한국어 단어 타임스탬프를 제공하고 RTX 4050 GPU에서 전사부터 코칭 이벤트 생성까지 검증한 faster-whisper-large-v3-turbo다.
합성 입력으로 필러 병합·재전사 창의 시각·침묵 구간을 회귀 검사한다. 이는 로직의 기대 동작을 확인하는 검사이며 실제 음성 탐지 성능을 증명하는 평가와 구분한다.
발표 당시 비교 기록, GPU 스모크 실행, 현재 공개 코드의 회귀 검사는 서로 다른 검증 기록이다. 발표 수치를 현재 커밋에서 다시 재현한 결과로 소개하지 않는다. 외부 유저 테스트 피드백 17건은 팀 서비스의 사용자 피드백이며, 담당 음성 분석 기능의 효과가 검증됐다는 의미로 사용하지 않는다.