nyra-FA 在 FA-Bench 強制對齊榜單排名第一
nyra labs 的強制對齊器在 FA-Bench 上的詞時間戳 F1 為 0.688,領先 Montreal-FA 的 0.658,且兩者的區間沒有重疊。它最大的優勢出現在有雜訊的對話語音上。
FA-Bench 排行榜 · github.com/olewave/fa-bench · arXiv 論文
nyra-FA 是 nyra labs 推出的強制對齊器,該團隊也是 CrisperWhisper 的開發者。它於 2026 年 11 月 10 日加入 FA-Bench 強制對齊詞級榜單,排名第一。 它在 20 ms 下的詞時間戳 F1 為 0.688,95% 區間為 0.677 至 0.698。Montreal-FA 以 0.658 排名第二,區間為 0.650 至 0.667。兩個區間沒有重疊,nyra-FA 在 16 個強制對齊器中的排名範圍是 1 至 1。
榜單以 nyra-forced-aligner 0.2.4 執行 nyra_forced_aligner_en。
其權重依據
nyra health Non-Commercial Research License 發布。
研究及其他非商業用途可免費使用。若要將此模型或其產生的時間戳用於商業用途,需要向 nyra health 取得商業授權。
差距出現在哪裡
最大的差距出現在加入雜訊的 Buckeye 對話語音,0.674 對 0.594。在乾淨的 Buckeye 上是 0.731 對 0.706。在乾淨的 TIMIT 上,Montreal-FA 的 F1 略高,0.685 對 0.683。它在那裡的詞邊界誤差也較低,也就是與人工標註邊界的平均距離,為 21.8 ms 對 27.1 ms。
完整數據
| TIMIT 乾淨 | TIMIT 加噪 | Buckeye 乾淨 | Buckeye 加噪 | 4 項平均 | |
|---|---|---|---|---|---|
| 詞時間戳 F1,nyra-FA | 0.683 | 0.663 | 0.731 | 0.674 | 0.688 |
| 詞時間戳 F1,Montreal-FA | 0.685 | 0.649 | 0.706 | 0.594 | 0.658 |
| 詞邊界誤差,nyra-FA | 27.1 ms | 30.0 ms | 20.2 ms | 31.4 ms | |
| 詞邊界誤差,Montreal-FA | 21.8 ms | 30.2 ms | 21.3 ms | 35.6 ms |
FA-Bench 如何評分
每個對齊器都會拿到音訊及其參考文稿,所以只有時間會被評分。一個詞的起點和終點,各自落在語言學家人工標註邊界的 20 ms 內時,就算命中。測試集是 TIMIT 核心測試集與 Buckeye 測試集,各有乾淨版本,以及加入殘響、雜訊、音樂和嘈雜人聲的版本。
FA-Bench 已在全部 20 個測試組合上執行 nyra-FA。感謝 Laurin Wagner 與 nyra labs 團隊公開接受測試。
你有對齊器或 ASR API 嗎?請提交附帶轉接器的 pull request。FA-Bench 會重新執行每個測試組合並發布結果。
Olewave 同時製作 FA-Bench 與 Olign,因此 Olign 以未排名的方式列在表格底部。