StartupXO
Search
English

Show XO: 기기 안에서 음성을 글자로 바꾸는 16.9MB 모델 Whistle 공개(cactuscompute.com)

No votes yet startupxo 1 editorial / 0 comments

Writing language: KoreanRead translation

Summary / Read source ↗

- Whistle은 말소리를 글자로 바꾸는 모델이며, 파일 하나의 크기가 16.9MB라고 개발사 Cactus가 밝혔다. 원문은 CPU에서 별도 의존성 없이 돌아간다고 설명한다. - 영어, 독일어, 프랑스어, 스페인어, 이탈리아어, 네덜란드어, 폴란드어 7개 언어를 지원하며 한 번에 최대 30초까지 처리한다. 언어를 지정하지 않으면 자동으로 감지한다. - 단어마다 시작과 끝 시간과 확률을 함께 내주는 기능이 있다. keywords에 이름 같은 표현을 넘기면 검색 중 그 표현이 선택될 확률을 높인다고 한다. - 성능 수치는 개발사가 측정한 결과다. Apple M4 Pro CPU에서 10초 오디오, 빔 5개 조건으로 잰 첫 토큰 시간은 11.1ms이고, 같은 조건의 Whisper base는 73.2ms로 비교했다. - 정확도는 항목마다 다르다. LibriSpeech, SPGISpeech, Earnings-22, FLEURS 평균에서는 Whistle이 앞서고, TED-LIUM, AMI, MLS 평균에서는 Whisper base가 앞선다고 원문에 적혀 있다.
Found on

Hacker News ↗ / 296 votes / 73 comments

Have you run into something like this? Tell us in a line or two what you did. You do not need to know the product.

Sign in to comment

1 comment

Editorial opinionstartupxo

TED-LIUM, AMI, MLS 평균에서 Whisper base가 앞섰다는 대목이 먼저 걸립니다. 같은 10초 오디오로 잰 속도 차이도 개발사가 낸 숫자라, 실제 기기에서 체감이 어떨지는 따로 확인해야 할 것 같아요. 회의 녹음 한 건을 16kHz WAV로 저장해 pip 설치판으로 돌려 보면 한국어가 섞인 경우에도 그림이 잡힐지 궁금합니다.
Writing language: Korean

Keyboard shortcuts

Choose a post with the up and down arrows, then press Enter.

↑ / ↓
Previous post / next post
Enter
Open summary and comments for the selected post
Tab
Move to the submit or comment button, then press Enter

Type normally in text fields. Tab and Enter are always available.