오디오를 텍스트로 변환하는 whisper의 싱크 정확도를 개선한 whisperX

자유게시판

오디오를 텍스트로 변환하는 whisper의 싱크 정확도를 개선한 whisperX

24 이미나에게로 1 495 2

https://github.com/m-bain/whisperX 


sample01.mp4 - 기존 whisper

sample_whisper_og.mov  - 개선된 whisperX

위 링크에서 두 파일을 재생해보면 whisperX의 싱크 정확도가 더 나아졌습니다.


올빼미 개봉할 때 예고편으로 한글 테스트해보니 유튜브 자동 자막보다 품질이 떨어지고, 영문은 유튜브 자동 자막보다 정확하는 느낌듭니다.(whisper)


subtitle edit 3.6.11 에서는 '선택한 구간을 오디오를 텍스트로' 단축키를 지정할 수 있습니다. * Add "audio to text selected lines" shortcuts

https://cineaste.co.kr/bbs/board.php?bo_table=co_qa&wr_id=147038 

a3042a26a7753d8bf9f5c768902aeb66_1675165228_6214.png

한글 밀리는 것은 마우스로 비디오 플레이어 클릭해 멈추는 대신 키보드 단축키로 '재생 및 일시정지'하면 해결되는 것 같습니다. https://youtu.be/1TpTNg0H_LM?t=192

a3042a26a7753d8bf9f5c768902aeb66_1675165243_9562.png

 
Facebook Twitter GooglePlus KakaoStory NaverBand 신고
 
1 Comments
13 oO지온Oo  
섭타이틀 에디트 3.6.11에서 바로 사용할 수 있는 건가요?
친구가 요즘 음성인식 관련해서 어도비 프리미어로 염병떨고 있다고 하길래
섭타이틀 에디트에서 바로 사용 가능한 것이라면 친구에게 이걸 추천해 주고 싶어서 질문해 봅니다.
평소에 자막 만들던 놈이 아닌데 왜 갑자기 음성인식 텍스트에 관심을 갖는지는 저도 모르겠군요.