FA-Bench Leaderboard · github.com/olewave/fa-bench · Paper on arXiv

nyra-FAは、CrisperWhisperを手がけるチームnyra labsの強制アライナーです。 2026年11月10日にFA-Benchの強制アラインメント単語ボードに加わり、1位になりました。 20 msでの単語タイムスタンプF1は0.688で、95%区間は0.677から0.698です。2位はMontreal-FAで0.658、区間は0.650から0.667です。2つの区間は重なりません。nyra-FAの順位範囲は、16の強制アライナーの中で1から1です。

ボードでは、nyra-forced-aligner 0.2.4でnyra_forced_aligner_enを実行しています。 重みはnyra health Non-Commercial Research Licenseの下で公開されています。 研究などの非商用利用は無料です。モデル、またはモデルが生成するタイムスタンプを商用で使う場合は、nyra healthの商用ライセンスが必要です。

差が出る場所

最も差が大きいのは、ノイズを加えたBuckeyeの会話で、0.674に対して0.594です。 クリーンなBuckeyeでは、0.731に対して0.706です。クリーンなTIMITでは、Montreal-FAのF1がわずかに高く、0.685に対して0.683です。 単語境界誤差も、Montreal-FAのほうが低くなっています。これは手作業でラベル付けした境界からの平均距離で、21.8 msに対して27.1 msです。

FA-Benchの採点方法

各アライナーには、音声と参照用の書き起こしが与えられます。そのため、採点されるのはタイミングだけです。 単語の開始と終了はそれぞれ、言語学者が手作業でラベル付けした境界から20 ms以内にあれば正解とします。テストセットは TIMITのコアテストとBuckeyeのテストで、それぞれクリーンな音声と、残響、ノイズ、音楽、バブルノイズを加えた音声があります。

FA-Benchは、20のテストセルすべてでnyra-FAを実行しました。公開の場でテストしてくださったLaurin Wagnerさんとnyra labsチームに感謝します。

アライナーやASR APIをお持ちですか。アダプター付きのプルリクエストを送ってください。FA-Benchがすべてのテストセルをもう一度実行し、結果を公開します。

OlewaveはFA-BenchとOlignの両方を開発しているため、Olignは順位なしで表の最下部に掲載しています。