Olign, Olewave์ ๋ฉ์ค์ฒ๋ผ ์ ๋ฐํ ์์ฑ-ํ ์คํธ ๊ฐ์ ์ ๋ ฌ ์๋น์ค
๋ น์ ํ์ผ๊ณผ ํจ๊ป ์ ์ฌ๋ฌธ์ด๋ ASR ๊ฒฐ๊ณผ๋ฅผ ๋ณด๋ด์ธ์. ๋ ๋ค ์์ผ๋ฉด Olign์ด ์ค๋์ค๋ฅผ ์ง์ ์ ์ฌํฉ๋๋ค. ๋ชจ๋ ๋จ์ด์ ์์๋ ์์ ์๊ฐ, ์ข ๋ฃ ์๊ฐ, ๊ทธ๋ฆฌ๊ณ 0์์ 100 ์ฌ์ด์ ์ ์์ ํจ๊ป ๋ฐํ๋ฉ๋๋ค. Olign์ ๋จ์ด ํ์์คํฌํ๋ Montreal Forced Aligner, Qwen3-ForcedAligner, WhisperX๋ณด๋ค ์ ํํฉ๋๋ค.
https://api.olewave.com/olign/v1
๋ฌด๋ฃ ๋ฒ ํ ์ด์ฉ์ด ์ด๋ ค ์์ต๋๋ค. ์ด๋ ์ฝ๋๋ฅผ ์์ฒญํ ๋ค API ํค๋ฅผ ์ง์ ๋ง๋์ธ์.
๋จ์ด ํ์์คํฌํ๋ ๋ณด์ด๋ ๊ฒ๋ณด๋ค ๋ถ์ ํํ ๊ฒฝ์ฐ๊ฐ ๋ง์ต๋๋ค. FA-Bench ๋ ผ๋ฌธ์ ๋ฐ๋ฅด๋ฉด Whisper๋ ๋จ์ด๋ฅผ ์ฝ 150 ms ์ผ์ฐ ๋ฐฐ์นํฉ๋๋ค. ์์ฉ ์์ฑ ํ ์คํธ ๋ณํ API 8๊ฐ ์ค 7๊ฐ๋ ๋จ์ด ์์์ด ๋ฆ๊ณ , ๊ทธ์ค 3๊ฐ๋ ๊ทธ ์ฐจ์ด๊ฐ 50 ms๋ฅผ ๋์ต๋๋ค. ๊ฐ์ ์ ๋ ฌ๊ธฐ๋ ์คํจํ๋ ๋ฐฉ์์ด ๋ค๋ฆ ๋๋ค. Buckeye ํ ์คํธ ๋ถํ ์ ๋ฐฐ๊ฒฝ ์์์ ๋ํ๋ฉด Montreal Forced Aligner 3.4๋ 4,513๊ฐ ๋ฐํ ์ค 354๊ฐ์์ ์ ๋ ฌ ๊ฒฐ๊ณผ๋ฅผ ๋ฐํํ์ง ๋ชปํ์ต๋๋ค.
์ ํฌ๋ ์์์ด ์์ธ ๋ น์์ ํฌํจํด ์ค์ ๋ น์์์ ๋จ์ด ๊ฒฝ๊ณ๋ฅผ ์ ํํ๊ฒ ์ฐพ๋๋ก Olign์ ๋ง๋ค์์ต๋๋ค.
๋ชจ๋ ๊ฐ์ ์ ๋ ฌ๊ธฐ ์ค ๊ฐ์ฅ ๋์ ๊ฒฝ๊ณ F1
๊ฐ์ ์ ์ฌ๋ฌธ์ด ์ฃผ์ด์ง๋ฉด Olign์ FA-Bench๊ฐ ํ๊ฐํ๋ ๋ค๋ฅธ ์ด๋ค ๊ฐ์ ์ ๋ ฌ๊ธฐ๋ณด๋ค ๋จ์ด ๊ฒฝ๊ณ๋ฅผ ๋ ์ ํํ๊ฒ ์ฐพ์ต๋๋ค. ๋ ๋ง๋ญ์น์์ ๋ชจ๋ ๊ทธ๋ ๊ณ , ๊นจ๋ํ ์ค๋์ค์ ์์์ ๋ํ ์ค๋์ค์์๋ ๋ง์ฐฌ๊ฐ์ง์ ๋๋ค. TIMIT core-test์์ Olign์ ๋จ์ด ๊ฒฝ๊ณ F1์ 0.782์ด๊ณ , Montreal Forced Aligner 3.4๋ 0.644์ ๋๋ค. Olign์ด ์ฐ์ ๋จ์ด ์์์ ํ๊ท 3.1 ms ์ผ์ฐ ๋์ ๋๋ค. F1์ ์์คํ ์ด ๋ฐฐ์นํ์ง ๋ชปํ ๋จ์ด๊น์ง ๋น ์ง์์ด ๋ฐ์ํ๋ฏ๋ก ์ด ๋ฒค์น๋งํฌ์ ์ฃผ์ ์งํ์ ๋๋ค. ํ๊ท ์ ๋ ์ค์ฐจ์์๋ ๊ทธ๋ฐ ๋จ์ด๊ฐ ๋น ์ง๋๋ค.
์ด๋ฏธ ์ฌ์ฉ ์ค์ธ ASR์ ๋ ๋์ ํ์ด๋ฐ์
์ฌ์ฉ ์ค์ธ ์์ฑ ์ธ์๊ธฐ๋ ๊ทธ๋๋ก ๋๊ณ ๋จ์ด ํ์ด๋ฐ์ Olign์ ๋งก๊ธฐ์ธ์. TIMIT core-test์์ Google Chirp 2๊ฐ ์ธ์ํ ๋จ์ด๋ฅผ ๋๊ฒจ๋ฐ์ผ๋ฉด Olign์ ๊ทธ ๋จ์ด์ ๊ฒฝ๊ณ F1์ 0.443์์ 0.734๋ก ๋์ด์ฌ๋ฆฝ๋๋ค. ์ธ์๋ ๋จ์ด๋ ๊ทธ๋๋ก์ด๋ฏ๋ก ํฅ์๋ถ์ ๋ชจ๋ ํ์ด๋ฐ์์ ๋์ต๋๋ค. ์ด๋ ๊ฒ ์คํํ๋ฉด Olign์ ๋ชจ๋ ๋ถํ ์์ ๋ฒค์น๋งํฌ์ ์์ฉ API 8๊ฐ ์ ๋ถ๋ณด๋ค ํ์์คํฌํ๊ฐ ์ ํํฉ๋๋ค.
์์์ด ์์ธ ์ค๋์ค์์๋ ์์ ์ ์ธ ์ ๋ ฌ
Buckeye ํ ์คํธ ๋ถํ ์ ์ฒด๋ฅผ ๊นจ๋ํ ์กฐ๊ฑด๊ณผ ๋ค ๊ฐ์ง ์ดํ ์กฐ๊ฑด์์ ๋๋ ธ์ ๋ Olign์ 22,565๊ฐ ๋ฐํ ์ค 3๊ฐ๋ฅผ ๋บ ๋๋จธ์ง ์ ๋ถ์ ์ ๋ ฌ ๊ฒฐ๊ณผ๋ฅผ ๋ฐํํ์ต๋๋ค. Montreal Forced Aligner 3.4๋ ๊ทธ์ค 573๊ฐ์์ ์๋ฌด๊ฒ๋ ๋ฐํํ์ง ๋ชปํ์ต๋๋ค.
์ง์ ํ์ธํ ์ ์๋ ์์น
์ด ํ์ด์ง์ ๋ชจ๋ ๊ฒฐ๊ณผ๋ FA-Bench์์ ๋์์ต๋๋ค. FA-Bench๋ ์คํ ์์ค์ด๋ฉฐ arXiv ๋ ผ๋ฌธ์ ์ค๋ช ๋์ด ์์ต๋๋ค. ๊ณต๊ฐ๋ ์์น๋ฅผ ๋ง๋ v0.9 API๋ ๊ณ์ ์ ๊ณต๋๋ฏ๋ก ์ง์ ์ฌํํ ์ ์์ต๋๋ค. ์ง๊ธ ์ฐ๋ ์คํ์๋ ๊ฐ์ ๋ฒค์น๋งํฌ๋ฅผ ์คํํด ๋ณผ ์ ์์ต๋๋ค.
์ค๋์ค๊ฐ ๋คํธ์ํฌ๋ฅผ ๋ฒ์ด๋ ์ ์๋ค๋ฉด ์์ฒด ํธ์คํ
๋ น์ ํ์ผ์ด ๊ท์ฌ์ VPC ์์ ๋จธ๋ฌผ๋ฌ์ผ ํ๋ค๋ฉด ์์ฒด ํธ์คํ ๋ฐฐํฌ๋ฅผ ๋ ผ์ํ ์ ์์ต๋๋ค.
FA-Bench ๊ธฐ์ค ๋จ์ด ํ์์คํฌํ ์ ํ๋
fabench ํ๋กํ ์ฝ์ ๋ฐ๋ผ 10 ms ๊ฒฉ์์์ ์ฑ์ ํ์ผ๋ฉฐ ๋ถํธ์คํธ๋ฉ 95 % ์ ๋ขฐ๊ตฌ๊ฐ์ ๊ตฌํ์ต๋๋ค. ๋ค ์์คํ
๋ชจ๋ ์ ๋ต ์ ์ฌ ํธ๋์์ ์คํํ๋ฏ๋ก ๊ฐ ์์คํ
์ ๊ธฐ์ค ๋จ์ด๋ฅผ ์ ๋ฌ๋ฐ๊ณ ํ์ด๋ฐ๋ง ์ธก์ ๋ฉ๋๋ค. ์ด ์์น์๋ ์ธ์ ์ค๋ฅ๊ฐ ์ ํ ๋ฐ์๋์ง ์์ต๋๋ค. ๋ ๋ถํ ๋ชจ๋ ํ๋์์์ด๋ฉฐ ํ์๊ฐ ๊ฒน์น์ง ์์ต๋๋ค. TIMIT core-test๋ ๋ง๋ญ์น ๋ฌธ์๊ฐ ์๊ตฌํ๋ ๋๋ก SA ๋ฌธ์ฅ์ ์ ์ธํฉ๋๋ค. Buckeye ํ
์คํธ ๋ถํ ์ ์ด ๋ง๋ญ์น ๊ณ ์ ์ ์ฑ๋ณ๊ณผ ์ฐ๋ น ๊ต์ฐจ ์ค๊ณ์ ๋ฐ๋ผ ํ์ 24๋ช
, 8๋ช
, 8๋ช
์ ๊ฑธ์ณ ์ธตํํ์ผ๋ฉฐ, ๋ฐํ๋ณ ์์ ์ ๋ณด๋ ์ ์ฅ์์ ์ปค๋ฐํด ๋์์ต๋๋ค. ์๋๋ฌ์ด ํ๊ฒฝ์ ๋ค ๊ฐ์ง ์ดํ ์กฐ๊ฑด์ ํ๊ท ์
๋๋ค. ์ดํ ์กฐ๊ฑด์ ์ํฅ, ์ก์, ์์
, ์
์ฑ๊ฑฐ๋ฆผ์
๋๋ค. ๋ฒ ์ด์ค๋ผ์ธ์ Montreal Forced Aligner 3.4.1, Qwen3-ForcedAligner-0.6B, WhisperX 3.8.6์
๋๋ค. ์ ์ฒด ๊ฒฐ๊ณผ๋ TIMIT ๋ฐ Buckeye ํ์ด์ง์์ ๋ณผ ์ ์์ต๋๋ค.๋ฌด๋ฃ ๋ฒ ํ ์ด์ฉ์ด ๋ฏธ๊ตญ ์์ด์ ์๊ตญ ์์ด๋ฅผ ๋์์ผ๋ก ์ด๋ ค ์์ผ๋ฉฐ, ๋ ๋ง์ ์ธ์ด๋ฅผ ๊ณํํ๊ณ ์์ต๋๋ค. ์ด๋ ์ฝ๋๋ฅผ ์์ฒญํ๊ณ API ํค๋ฅผ ๋ง๋ ๋ค, ์ต๋ 60๋ถ ๊ธธ์ด์ ๋ น์ ์ ์ฒด๋ฅผ ์์ ์ผ๋ก ๋ณด๋ด์ธ์. ๋ฒ ํ์์๋ ๊ณ์ ๋น ํ๋ฃจ 60๋ถ ๋ถ๋์ ์ค๋์ค๋ฅผ ์ฒ๋ฆฌํ ์ ์์ต๋๋ค. ์์ ํ๋๋ฅผ ์คํํ๋ ๋ฐ๋ ๋ น์ ๊ธธ์ด์ ์ฝ 8๋ถ์ 1์ด ๊ฑธ๋ฆฝ๋๋ค. ์ด ํ์ด์ง์ ์ ํ๋ ์์น๋ ๋ฏธ๊ตญ ์์ด์์ ์ธก์ ํ์ต๋๋ค.
๋ฒ ํ ์ด์ฉ ์ ์ฒญ · FA-Bench ๋ ผ๋ฌธ · FA-Bench ์ฝ๋ · ํด๋ผ์ด์ธํธ ๋ผ์ด๋ธ๋ฌ๋ฆฌ
๋ฒ ํ ๊ธฐ๊ฐ์๋ Olign์ ๋ฌด๋ฃ๋ก ์ฌ์ฉํด ๋ณด์ธ์.
์ด๋ ์ฝ๋๋ฅผ ์์ฒญํ๊ณ API ํค๋ฅผ ๋ง๋์ธ์. ๋ฒ ํ์์๋ ํ๋ฃจ 60๋ถ ๋ถ๋์ ์ค๋์ค๋ฅผ ์ฌ์ฉํ ์ ์์ต๋๋ค. ์ง๊ธ ์ฐ๋ ์ ๋ ฌ๊ธฐ๋ ASR๊ณผ Olign์ ๋น๊ตํด ๋ณด๊ธฐ์ ์ถฉ๋ถํ ์์ ๋๋ค.
์ด๋ ์ฝ๋ ์์ฒญ →