-
Notifications
You must be signed in to change notification settings - Fork 300
/
Release-ja.txt
829 lines (712 loc) · 43.2 KB
/
Release-ja.txt
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
268
269
270
271
272
273
274
275
276
277
278
279
280
281
282
283
284
285
286
287
288
289
290
291
292
293
294
295
296
297
298
299
300
301
302
303
304
305
306
307
308
309
310
311
312
313
314
315
316
317
318
319
320
321
322
323
324
325
326
327
328
329
330
331
332
333
334
335
336
337
338
339
340
341
342
343
344
345
346
347
348
349
350
351
352
353
354
355
356
357
358
359
360
361
362
363
364
365
366
367
368
369
370
371
372
373
374
375
376
377
378
379
380
381
382
383
384
385
386
387
388
389
390
391
392
393
394
395
396
397
398
399
400
401
402
403
404
405
406
407
408
409
410
411
412
413
414
415
416
417
418
419
420
421
422
423
424
425
426
427
428
429
430
431
432
433
434
435
436
437
438
439
440
441
442
443
444
445
446
447
448
449
450
451
452
453
454
455
456
457
458
459
460
461
462
463
464
465
466
467
468
469
470
471
472
473
474
475
476
477
478
479
480
481
482
483
484
485
486
487
488
489
490
491
492
493
494
495
496
497
498
499
500
501
502
503
504
505
506
507
508
509
510
511
512
513
514
515
516
517
518
519
520
521
522
523
524
525
526
527
528
529
530
531
532
533
534
535
536
537
538
539
540
541
542
543
544
545
546
547
548
549
550
551
552
553
554
555
556
557
558
559
560
561
562
563
564
565
566
567
568
569
570
571
572
573
574
575
576
577
578
579
580
581
582
583
584
585
586
587
588
589
590
591
592
593
594
595
596
597
598
599
600
601
602
603
604
605
606
607
608
609
610
611
612
613
614
615
616
617
618
619
620
621
622
623
624
625
626
627
628
629
630
631
632
633
634
635
636
637
638
639
640
641
642
643
644
645
646
647
648
649
650
651
652
653
654
655
656
657
658
659
660
661
662
663
664
665
666
667
668
669
670
671
672
673
674
675
676
677
678
679
680
681
682
683
684
685
686
687
688
689
690
691
692
693
694
695
696
697
698
699
700
701
702
703
704
705
706
707
708
709
710
711
712
713
714
715
716
717
718
719
720
721
722
723
724
725
726
727
728
729
730
731
732
733
734
735
736
737
738
739
740
741
742
743
744
745
746
747
748
749
750
751
752
753
754
755
756
757
758
759
760
761
762
763
764
765
766
767
768
769
770
771
772
773
774
775
776
777
778
779
780
781
782
783
784
785
786
787
788
789
790
791
792
793
794
795
796
797
798
799
800
801
802
803
804
805
806
807
808
809
810
811
812
813
814
815
816
817
818
819
820
821
822
823
824
825
826
827
828
829
4.6 (2020.09.02)
=================
○新機能
- GPU サポート(DNN-HMM計算部)
- CUDA toolkit をインストールし nvcc でビルドすることで有効化 詳しくは INSTALL.txt の対応する項目を。
- .dnnconf で "cuda_mode=..." で詳細なパラメータを設定可能 詳しくは Sample.dnnconf の末尾を。
- Linux の CUDA 8.0, 9.0, 10.2 で動作確認済み
- 1パス文法認識の実装
- 第1パスからフルの文法制約を適用することで、1パス文法認識を行うモードを新規追加
- モードのON/OFFは文法単位:".dfa.forward" ファイルが存在する文法はこの機能が有効になり、なければ従来バージョン通り(単語対制約のみ)
- ".dfa.forward" は前向き文法ファイルで、これ以降のバージョンの "mkdfa" で自動生成される。
- DNN-HMM で出力が log10 化されている/いないモデルに両対応
- .dnnconf で "state_prior_log10nize=yes/no" で指定する
- 特徴量正規化モードを追加:平均は入力自身、分散は固定値を使うモード
- 新たなオプション "-cvnstatic" で指定可能
- 新モードを含めた全体的な動作の説明が "doc/Normalize.md" にまとめられた
○更新
- 修正BSDライセンスへ移行
- Python バージョンの文法コンパイラ "mkdfa.py" を gramtools/mkdfa に追加
- Visual Studio 2017 でのビルドに対応。多くのツールのビルドに対応。
- 最新版に合わせたドキュメントを markdown 形式で doc/ 以下に執筆中(フロントエンドまで記述)
- GitHubで見やすいよう各ディレクトリに README.md を置き、*.txt を廃止
- mkdfa (mkfa) がエラー行番号などより詳細なエラーを出力するようになった
○バグ修正
- "mkbingram" で文字コード変換を指定しても無視される不具合を修正
- その他の軽微な修正
4.5 (2019.01.02)
=================
○新機能
- ロバストな VAD のために libfvad を取り込み
- libfvad: a voice activity detection library based on WebRTC's VAD
engine [https://github.com/dpirch/libfvad]
- 本バージョンより dual-mode VAD となった:
- 旧モジュール(入力振幅とゼロ交差数ベース)
- 新モジュール(libfvadベース (=モデルベース))
- 2つのVADモジュールはオーディオ入力に対して並行で同時に動く
- 両方ともトリガしたときに音声区間が開始される
- 新VAD (libfvad) はデフォルトではオフ。オプション "-fvad 値" で有効
化。値は 0 から 3 で大きいほどアグレッシブな VAD を行う。(WebRTCの仕
様のまま)
- 新VAD と関連オプションは julius, adinrec, adintool にて使用可能
- 使い方の例:
- "-fvad -1" で旧モジュールのみ使用(以前のバージョンと等価)
- "-fvad 3 -lv 1" で新モジュールのみ使用。 "-lv 1" とすることで
旧モジュールを常にトリガ状態にすることで、VAD結果が新モジュール
のみに依存させることができる
- マルチスレッドの DNN 計算をサポート
- スレッド数は dnnconf で "num_threads" で指定できる。デフォルトは 2。o
○変更点
- モジュールモードの出力(XML形式) で XML エスケープに対応
- <, >, ", &, ' は <, >, " &, %apos; に変換される
- オプション "-noxmlescape" でエスケープをオフにして以前のバージョン
の動作に戻せます
○バグ修正
- 並列ビルド (ex. make -j 4)
- adintool-gui に引数を与えるとたまにクラッシュするバグを修正
- ワーニング・メモリリークを修正
- 一部 OS でのビルドエラーを修正
○新オプション
[-fvad mode] libfvadベースVADの有効/無効およびモードの設定。 mode
が -1 だと無効化、0 から 3 だと有効化。0 以上の値は強度を表し、値が
大きいほどアグレッシブなVADになる(= speech-like noise でも落とそうと
する)。デフォルト値は -1 (無効)
[-fvad_param nFrame thres] libfvad ベースVADの詳細パラメータを変更
する。nFrame はスムージングフレーム数、thres は音声トリガ検知閾値で
0.0 から 1.0 の間の値。デフォルト値はそれぞれ 5, 0.5 である。
○新configureオプション
"--disable-libfvad": libfvad のビルドを無効化
○ドキュメント更新中
- adinrec,adintool README.md README.ja.md
- julius README.md, Options.md
4.4.2.1 (2016.12.20)
====================
- AndroidとiOS用の細かい修正
- msvcディレクトリの整理
4.4.2 (2016.09.12)
===================
- dnnconf 内の相対パスをそのdnnconf自身からの相対パスとして扱うよう修正
- DNN使用時、認識処理の第2パスが異常に遅いことがある不具合を修正
- AVX非対応のCPUでDNN計算が動作しない不具合を修正
- ARMとVisualStudioでのビルドを改善
4.4.1 (2016.09.07)
===================
- DNNのSIMD計算の高速化と安定化:SSE命令、FMA命令、ARMのNEON命令を実装
- DNN使用時にCPUを自動チェックして最適なSIMDコードを選択使用するよう拡張
- VisualStudio2013でのコンパイル用に PortAudio と zlib のソースを同梱
- mkbinhmmlistで作ったバイナリHMMListが正しく読めないことがあるバグを修正
- adintool-gui コンパイル時のSDL周りが動かないのを修正
- "INSTALL.txt" に各OSでのビルドのセットアップと実行方法を記述
- pkg-config に対応
- その他バグの修正
4.4 (2016.08.30)
=================
- DNN-HMMの計算をサポート
- "adintool-gui": 音声入力モニタGUI付き adintool (adintool/README-GUI.txt参照)
- "binlm2arpa": バイナリ言語モデルをARPAに変換する
- "mkbingram" に言語モデルの文字コードを変換して出力するオプション "-c" を追加
- モジュールモードで動作時,クライアント切断後に落ちずに再接続できるよう改善
- 幾つかのOSでのコンパイルエラーを修正
- メモリリークを幾つか修正
- バージョン2.6以降の Autoconf で動作するよう修正
- GitHub用のファイルを追加(README.md, CONTRIBUTING.md 等)
- DNN-HMMを使った認識の説明テキスト "00readme-DNN.txt" を追加
- VisualStudio2013以降をサポート
4.3.1 (2014.01.15)
===================
○バグ修正
- OS X でのコンパイルエラー
- adintool での不要なデバッグメッセージ出力
- "-cmnload" まわりの読み込み・計算に関わるいくつかのバグ
4.3 (2013.12.25)
=================
○新機能
- フィルタバンク出力(FBANK および MELSPEC)のサポート
- ネットワーク経由の特徴量ベクトル入力および出力確率ベクトル入力
- DNN-HMMデコーディングのための状態出力確率ベクトル(outprob vector)入力
- DNN-HMMデコーディングのためのhmmdefsへの "<SID>" 拡張の導入
- adintool でリアルタイムの特徴量抽出とネットワーク送信が可能に
○変更点
- mkbinhmm が変換元hmmdefsの状態順あるいはID("<SID>")を保持
- Portaudio 使用時エンジンのpause/resumeで音声デバイスも停止・再開する
- CMN/CVN用のケプストラム平均・分散を HTK テキスト形式で保存するように
○新オプション
[-input vecnet] ネットワークから特徴量/出力確率ベクトルを読み込む
[-input outprob] HTKパラメータファイルを出力確率ベクトルとして読み込む
[-outprobout [file]] 計算された出力確率行列をHTK形式ファイルに保存(debug)
4.2.3 (2013.06.30)
==================
○新機能
- 辞書のリロード: j_reload_adddict()
- 音声入力の振幅のスケーリング:"-lvscale factor" および
"j_adin_change_input_scaling_factor()"
- 長い入力の棄却:"-rejectlong msec"
- バイナリN-gramの文字コード変換をサポート: "mkbingram"
- ベイズリスク最小化(MBR)探索の実装(南條浩輝氏,古谷遼氏より提供)
○修正されたバグ
- ビッグエンディアンマシンでadinnetで音声をネットワーク送信するときに
エンディアンが異なっていた問題
- j_close_stream() で音声デバイスのクローズにたまに失敗する
- 64bit環境で変換されたパラメータ埋め込み付きバイナリHMMが読み込めない問題
- N-gram ファイル読み込み失敗時のメモリリーク
- 入力長オーバーフロー時のメモリリーク
- 特徴ベクトル呼び込みプラグインが動作しない
- 最新のMacOSXでコンパイルに失敗する
4.2.2 (2012.08.01)
==================
○修正点
- Flex ライブラリ無しでコンパイルできるようになった
- "--enable-words-int" 指定時に通常のバイナリ N-gram が読めない不具合を修正
- Windows において jconf 内でバックスラッシュの入ったパスを扱えないバグを修正
- エラーを含む単語辞書を読んだときに segfault する不具合を修正
- 探索中に稀に segfault する不具合を修正
4.2.1 (2011.12.25)
===================
○新機能
- 文法認識において単語別の挿入ペナルティ設定をサポート.
辞書において以下のように指定する
15 @-2.0 15 [a] a
第1フィールドは従来と同じカテゴリ番号。
第2フィールドに "@" に続けて挿入ペナルティを対数で指定する。
第3フィールドは第1フィールドと同じ値を書く。
- 新オプション "-chunk_size": オーディオ入力のバッファ長をサンプル数で
指定可能(デフォルト: 1000)小さくすると遅延を小さくできるが小さす
ぎると不安定になる。
- adintool で標準入力時に検出をデフォルトで有効化
○修正されたバグ
- 特徴量に C0 を使っているとき,C0 に CMN が行われない
(このバグは4.1.3〜4.2までのJuliusに存在する)
- mkbingram,generate-ngram が cygwin で落ちる
- "-adddict" で追加した辞書に "-forcedict" が効かない
- 音声録音時,CTRL+C で止めると WAV ヘッダにデータ長が書きこまれない
- エラーを含む辞書を読んだとき、エラーを吐かずに segfault する
- "--enable-word-graph" でコンパイルエラーが出る
4.2 (2011.05.01)
=================
○新機能
- 第1パスのスコアプルーニング."-bs 値" で有効化, "値" はスコア幅.
通常のランクプルーニング(-b 値) と併用.デフォルトはオフ.
- 新オプション "-adddict" "-addword":辞書・単語エントリを追加読み込み.
- PulseAudio サポート (--with-mictype=pulseaudio)
- Portaudio を V19 に更新.
- Portaudio を使う全ての場合において,複数の録音デバイスが利用可能なとき,
環境変数 PORTAUDIO_DEV_NUM で使用する録音デバイスを指定可能にした.
起動時に出力されるデバイス一覧の値を指定する.
○仕様変更を伴う改善
- mkbinhmmlist が音響モデルから抽出した pseudo phone 情報も書きだすよ
うになった.起動の高速化に寄与する.ただし作成した音響モデルとセット
で使用する必要がある.また,このバージョン以降の mkbinhmmlist で作成
した binhmmlist ファイルは以前のバージョンでは使用できない.
- オーディオライブラリのリンク方法の変更.configure に
"--with-mictype" を指定したときは,その指定されたライブラリ*のみ*
をリンクするようになった.指定がないときは,従来通り,検出された
ライブラリを全てリンクする.
○ライブラリ関数
- j_config_load_string_new(char *str): j_config_load_file() と同様,
ただしファイルではなく str に含まれるオプション指定文字列を直接
評価する.
- add_dict() および add_word(): オプション "-adddict" "-addword" と同
じく,辞書や単語を追加する.エンジン起動後動的にはできないので,
エンジンインスタンス生成前に呼ぶこと.
- portaudio 使用時(Windows等), 環境変数 PORTAUDIO_DEV_NUM と同様に,
j_open_stream(recog, NUMSTR) として引数でもデバイス選択が可能.
- portaudio 使用時(Windows等),get_device_list() で利用可能なデバイス
一覧を取得できる.
○性能改善・バグ修正
- 木構造化辞書を一部最適化,特に大語彙でメモリ量を削減
- N-gram読み込み時,場合によっては数万回mallocしていたのを減らした
- メモリリークをほぼ撲滅(Valgrind使用)
- j_close_stream() に関する不具合を複数修正
- "-iwsp" をマルチパス音響モデルだけで使えるよう修正
4.1.5.1 (2010.12.25)
=====================
○修正
- ライセンスに関する問題を修正
4.1.5 (2010.06.04)
===================
以下のバグを修正:
・言語モデルとデコーディングのバグ修正
(スコアと認識率に影響する可能性あり)
- 文法認識で単語挿入ペナルティの扱いがおかしいことがあるのを発見・修正
- 第2パスで最初の単語 "</s>" の1-gramを無視していたのを修正
・MFCC特徴量計算
- Liftering パラメータ(CEPLIFTER)が 0 のときに計算がおかしくなるバ
グを修正
・コンパイル環境
- cygwin, MSVC でのコンパイルを改善
- cygwin で "gcc -mno-cygwin" をサポート
- "--disable-plugin" を configure で指定したときにエラーになるのを修正
・モジュールモード
- jcontrol から addgram や changegram で文法・辞書が送れないことがあ
るのを修正
- "DELPROCESS" コマンドが、SR と LM のインスタンス名が異なるとき動か
ないのを修正。(SR名のみで可能)
・その他修正
- "-mapunk" オプションが引数を正しく読めないことがあるのを修正
- jconf ファイル内の "-htkconf" がファイル名を jconf からの相対パス
と解釈しないバグを修正
- "-input stdin" で標準入力から与える音声入力ファイルに WAV 形式が
使えなかったのを修正
- プラグインの場所指定 "-plugin ディレクトリ名" が MSVC で動かなかっ
たのを修正
4.1.4 (2009.12.25)
===================
○新規
- MSVC でコンパイルされたJuliusにおいて音声入力デバイスを選択する機能
を追加.環境変数 PORTAUDIO_DEV_NUM で番号を指定する.デバイスの番号
は起動時に一覧がログに出るのでその中から選択して指定すること.
- MSVC版 Julius で言語モデルごとにロケールを指定できるようになった.
○修正
- Mac OS X (OS X 10.6 SDK) でコンパイルできるようになった
- 遅延の低減と互換性に関する portaudio (Windows用) 周りの修正
4.1.3 (2009.11.02)
===================
○新規
- 新たな MSVC サポート:"msvc/00README.txt" を読んでください。
- 任意長の N-gram をサポート
- システムに portaudio ライブラリとヘッダがあれば、Julius 内蔵の
portaudio の代わりにそれを使用するようになった。外部ライブラリは
V19 にも対応する。その場合、録音デバイスを PORTAUDIO_DEV で指定可能。
書式は起動時のログを見ること。
- モジュールモードでアライメント結果 (-walign) を出力可能に
○変更・修正
- 4.1.x で 0次ケプストラム項をCMNしていたのを、4.0.x 以前と同様に行わ
ないよう仕様変更した。
- j_get_current_filename() を JuliusLib に追加
- "--enable-wpair" のアルゴリズムを若干改善
○バグ修正
- 入力ストリーム開始・終了にまつわる複数のバグを修正
- julius-simple が make できないバグを修正
- cygwin で録音できないバグを修正
- adintool が "-server" で落ちるバグを修正
- たまに文法認識で文法切り替え後に落ちるバグを修正
4.1.2 (2009.02.12)
===================
[N-gram]
- サイズ上限を 2GB から 4GB に拡張
- "-mapunk" で unknown word を指定可能に.デフォルトは "<unk>" "<UNK>"
- チェックの厳密化:辞書に未知語がある場合,N-gram に "<unk>" が無いとエラー
[SRILM対応]
- backward ARPA 読み込み時に <s> </s> を自動入れ替え
- mkbingram で backward ARPA 読み込み時に "-swap" で明示的に入れ替え
- <s>の 1-gramが必ず -99 になるのを自動修正
[機能改善]
- successor list 構築アルゴリズムを高速化.
- yomi2voca.pl 更新
- ALSA audio buffer overrun 対策
- generate-ngram の -debug 指定時の挙動を変更
[JuliusLib]
- j_close_stream() 追加
[バグ修正]
- adintool 複数サーバ指定できないバグ修正
- cygwin でのコンパイルエラー修正 (libesd)
- "-input" 無指定時に落ちるバグを修正
4.1.1 (2008.12.13)
===================
バグ修正:
[N-gram]
- SRILM で学習した言語モデルが正しく読み込めないバグを修正
[音声入力]
- "-htkconf ConfigFile" で ConfigFile 内の "SOURCERATE" が無視される
のを修正
- "-input stdin" が動かないのを修正
[アラインメント]
- 単単語認識や "-1pass" 指定時でもアラインメントを出せるようになった
- "-palign", "-walign" と "-salign" を複数指定してもどれか一つしか
実行されないバグを修正
[Module mode]
- 単単語認識時 に receive/activate/dactivate できないバグを修正
- クライアントから文法をID番号で指定するとフリーズするバグを修正
- 認識結果の属する文法番号 (GRAM=..) の出力が常に 0 になるバグを修正
- 単単語認識時 "SYNCGRAM" を送るとJuliusが落ちるバグを修正
[Others]
- いくつかの OS でコンパイルできないのを修正("-ldl" を追加)
- Jconf 内でバックスラッシュが正しく扱えないバグを修正
- 1パス実行時に第1パスの結果を最終結果としても出力するよう修正
[Tools]
Jcontrol
- "graminfo" コマンドを新規サポート
- 単単語認識時に文法(辞書)をクライアントから送れないバグを修正
mkdfa
- mkfa がたまに落ちるのを修正
- DOS 形式の入力が読めないことがあるバグを修正
adintool
- 分割時にその始終端の時間を出力するようになった.
- 長いオーディオファイルを切るときにおかしくなるバグを修正
4.1 (2008.10.3)
================
■プラグインによる機能拡張:
- 対応するプラグインの型
- 音声信号入力
- 特徴量ベクトル入力
- 音声入力処理
- 特徴量ベクトル処理
- 結果出力
- JuliusLib のコールバック関数をプラグインから追加することも可能
- プラグインのサンプルソースコードを同梱.各関数の仕様の詳細なコメント付き.
- 動作環境:Linux, Windows および dlopen() がある OS
■新機能:
- マルチストリーム特徴量入力のサポート
- MSD-HMM のサポート(HTS ツールキットで学習したモデルを使用可能)
- CVN サポート
- VTLN 用 frequency warping (パラメータ推定は無し)
- "-input alsa", "-input oss" および "-input esd"
- モジュールモード用クライアントの perl 版 "jclient-perl" の同梱
■仕様変更:
- 複数モデル認識時のオプションの位置を制限
- オプションは対応するインスタンス定義の真後ろで書く必要がある.
(例:言語モデルオプションは "-LM" の直後,他のインスタンス定義の
前に書く必要がある.言語モデルオプションを "-AM" の後ろに書いたり
するとエラーになる)
- 全体オプションは,インスタンス定義の前に書くか,"-GLOBAL" オプション
指定直後に書く
なお,この新たな制約は "-nosectioncheck" を指定することで解除できる.
■バグ修正:
- "-record" で各検出区間の最初の無音部分がファイルに保存されない
- "-multigramout" が正しく動かない
- jconf ファイル内で環境変数の展開がたまにうまくいかない
- HMM の制約を緩和:HMM名の最大長を 256, 状態数の上限を撤廃
- モジュールの文法関係エラー時のメッセージを統一
■ドキュメント
- "Juliusbook" のリリース (pdf / html)
- マニュアルを刷新し,man ディレクトリ以下に集約.
デフォルトでインストールされるようになった.
4.0.2 (2008.5.27)
==================
新機能:
- 第2パスの探索が失敗したとき,旧バージョン (3.x 以前) では第1パスの結
果を最終結果として出力していたが,4.x では認識失敗=解なしとなる.
新オプション "-fallback1pass" を指定することで,旧バージョンと同様に,
第2パス失敗時に第1パスの結果を最終結果として出力するようにできる.
- 特徴量抽出で USEPOWER=T をサポート
仕様変更:
- GMM 使用時,"-AM_GMM" の指定がない場合,音響モデルの特徴量設定を共有
するようになった.
バグ修正:
- GMM による棄却が 4.0.1 で動かなくなっていたのを修正
- Linux/ALSA で他のデバイスを正しく指定できるようになった.
- 巨大な N-gram の読み込みにたまに失敗するバグを修正
- "-record" オプション指定時に不安定になるバグを修正
- マイク入力で sp-segment / GMM / VAD 実行時の callback 実行を修正
- その他,細かいバグ修正
4.0.1 (2008.3.12)
==================
仕様変更:
- Linux のデフォルトオーディオAPIを,OSS から ALSA に変更.
バグ修正:
- 音声入力
- ALSA ネイティブの入力が正しく動作しない
- "-48" オプション指定時に segfault
- "-spsegment" 指定時にMFCC入力でゼロフレームがあると segfault
- VAD関連
- ショートポーズセグメンテーション,GMM VAD, あるいはデコーダベー
スVADにおいて,セグメント間で CMN が効いていなかった
- 音響モデル関連
- マルチパスモード時,ショートポーズモデルが定義されていないと起動しない
- N-gram関連
- backward N-gram だけ与えられたとき第1パスの2-gramの値が正しくない
- 未知語エントリに対して確率が正しく割り当てられない.
- back-off の定義によっては読み込みに失敗することがある.
- 24bit以上のエントリを持つ巨大なN-gramの扱いに失敗する
- バックオフ係数の格納エリアが余分に malloc されていた.
- 単単語認識
- 単単語認識モードにおいて N ベスト出力 ("-output N") が正しくない
- インストール時の問題
- cygwin で "make install" に失敗する
- ソースコードの精錬
- 関数内の不要な static 変数をローカル変数に修正
- 探索部に残っていたワークエリア用大域変数を StackDecode に移動
新機能:
- モジュールモード
- "ACTIVATEGRAM", "DEACTIVATEGRAM", "DELGRAM" で文法を指定する際に,
文法 ID 番号だけでなく文法名でも指定できるようになった.
- 新コマンド "GRAMINFO": 現在の文法リストを返す.
4.0 (2007.12.19)
=================
(4.0 の新機能について,詳細は別紙を参考にしてください)
- 内部構造の整理
- エンジン本体のライブラリ化
- マルチデコーディングのサポート
- 言語モデルのモジュール化・Julianの統合
- 任意長 N-gram のサポート
- ユーザ定義言語制約
- 孤立単語認識のサポート
- confusion network 出力
- ショートポーズセグメンテーションの改善
- GMM ベースの VAD
- デコーダベースの VAD
- コンパイル時オプションの統合
- メモリ量の削減
- サンプルアプリ julius-simple の追加
- ツールの追加 (generate-ngram)
- adintool のマルチサーバ対応,機能強化など関連ツールの強化
3.5.3 (2006.12.29)
===================
- 性能の改善
- 音響尤度計算の最適化:約 20% から 40% の高速化
- メモリアクセスの最適化:特に,第2パスでの仮説のメモリ空間の再利用
- 辞書・単語トレリス周りのメモリ割り付けを改善
- 新たな文法関連ツール
- "dfa_minimize", "dfa_determinize" … DFA を最小化/決定化する.
- mkdfa.pl は dfa_minimize を自動的に呼び出すようになった.
- "slf2dfa" … HTK の文法ファイルから DFA 形式への変換ツールを同時公開
- HTK特徴抽出条件パラメータの埋め込み
- HTK の学習時に使った特徴量抽出設定の Config ファイルを直接読み込
んでパラメータを設定できるようになった.
- mkbinhmm で上記情報をバイナリHMMのヘッダに埋め込めるようになった.
- 単語グラフの改善
- トライフォンのスコアを考慮してグラフを分けるオプションの追加:同
じ場所の同じ単語であっても,単語の前後の音素コンテキストが異なる
場合に別の仮説として出力させる ("-graphrange -1")
- オンラインでのエネルギー項正規化のサポート
- エネルギー項正規化 (ENORMAL) で学習された音響モデルを用いた
オンライン音声認識を暫定サポート(直前の音声入力のパワーから正規化する)
- ソースコードの修正
- libsent/src/wav2mfcc を再構成
- 音響特徴量パラメータの扱いをモジュール化
- "--setting" オプションで libsent のコンパイル時設定もあわせて出力
- Doxygen-1.5.0 のサポート
- "julius-info@lists.sourceforge.jp" をオフィシャルの連絡先アドレスに
- Copyright のtypoを修正
- 以下のバグを修正
- "--enable-words-int" 時に言語モデルの読み込みに失敗することがある
- 大域変数,ローカルバッファ,オプション扱いに関するメモリリーク
- 制限を越えて長い入力に対する segmentation fault
- DFA の初期状態を二重にカウント
- mkdfa.pl: 環境によって mkfa が見つからず内部起動できないことがある
- adintool: 中断時,最後に空のファイルが残る
- adintool: 中断時,直前の数秒の入力がファイルに記録されない
- その他,細かい修正
3.5.2 (2006.07.31)
===================
- Windows コンソールでの動作の大幅改善
- DirectSound サポート (cygwin / mingw)
- 入力のスレッド化 (portaudio API 使用)
- 最新の MinGW 環境(5.0.2) に対応
- 単語グラフの精度改善
- 単語グラフの深さによるカット機能の追加 (-graphcut)
- 後処理の無限ループ回避用の上限設定 (-graphboundloop)
- グラフ単語仮説のマージと探索中断に関するアルゴリズムの改善
- 第1パスで単語トレリスのかわりに単語グラフを出力可能になった
- "--enable-word-graph" で単語グラフを出力,第2パスはグラフ上で探索
- "--enable-wpair" と同時に指定することで,広く用いられている
2-gram を使った1パスでのグラフ生成アルゴリズムとほぼ等価になる.
- バグ修正
- configure スクリプトが Solaris 8/9 で正しく動作しない
- tied-mixture モデルで -gprune none が動かない
- 音響モデルの duration ヘッダのエラーメッセージがおかしい
- MFCC の strip_zero がいつもワーニングを出す
- 実装の改善
- 音響モデルのメモリ管理を hmmdefs ごとに分けて管理するようにした
3.5.1 (2006.03.31)
===================
- 特徴量(MFCC)抽出の拡張
- 二次差分係数(Accel: _A)に対応.
- _A を用いる音響モデルで音声入力を直接認識できるようになった
- 新オプション "-accwin"
- 任意の型指定の組み合わせに対応(_0, _E, _N, _D, _A, _N)
- 任意の次元数に対応
- 抽出される特徴量のタイプおよび次元数は,音響モデルのヘッダから自動判断
- 細かい特徴量抽出のパラメータを指定可能になった:
-preemph, -fbank, -ceplif, -rawe / -norawe,
-enormal / -noenormal, -escale, -silfloor
- 新オプション "-zmeanframe": フレームごとの DC offset 除去 (HTK互換)
- MAP-CMN を導入
- マイク・ネットワーク入力で有効
- 新オプション"-cmnmapweight":重み係数を変更(デフォルト 100.0)
- オプション "-cmnload" で最初の発話の初期ケプストラムを指定可能
- 2発話目以降の初期ケプストラムは過去の5秒の平均を用いる.
新オプション "-cmnnoupdate" で初期ケプストラムを更新しないようにできる.
- モジュールモードの安定化
- 認識の停止・再開時に "<STARTPROC/>" "<STOPPROC/>" を新たに出力する
ようになった
- "ADDGRAM 文法名" "CHANGEGRAM 文法名" で文法に名前をつけられるよう
になった
- バグ修正
- モジュールモードのPAUSE/RESUMEタイミングに関するバグを複数修正
- 要素数が24bitに収まらない巨大なN-gramを扱えないバグを修正
- マルチパス版で3状態(出力1状態)の音響モデルが読み込めないバグを修正
- 文法の最後の状態がカウントされないことがあるバグを修正
- gramtools の一部が MacOSX でうまくコンパイルできないバグを修正
3.5 (2005.11.11)
=================
- 新たにサポートされた機能
- GMM による環境音識別および不要入力棄却(-gmm, -gmmnum -gmmreject)
- 単語グラフ出力 (--enable-graphout, --enable-graphout-nbest)
- 単語信頼度による枝刈り (--enable-cmthres)
- Julianで複数文法認識時に文法ごとの結果を出すオプションを追加
(-multigramout, 使い方は README-multigramout-ja.txt を参考に)
- 起動時に複数の文法ファイルを指定
"-gram prefix1,prefix2,..." もしくは "-gramlist listfile"
prefix は .dfa, .dict を除いたファイルのプレフィックスを指定
- テキスト出力のエンコーディング変換:"-charconv from to"
Linux では iconv, Win32 では Win32API + libjcode を使用.
- Linux での音声入力の改善
- ALSA-1.0.0 以降に対応 (--with-mictype=alsa)
- EsounD オーディオサーバーをサポート (--with-mictype=esd)
- USBオーディオ使用時にマイク入力が動作しないことがあるバグを修正
- 音声デバイス名(デフォルト:/dev/dsp)を環境変数 AUDIODEV で指定可能
- portaudio, spLib を音声入力として指定可能に
- メモリ使用量の改善
- 第1パスのビームのワークエリア使用メモリ量を削減
- 木構造化辞書のメモリ量を削減(outstyle, factoring関連の最適化)
(20k JNAS fast で 1.5MB削減)
- 単語N-gramのメモリ使用量を改善
(1)2-gramバックオフ構造を最適化(20k JNAS で 8MB削減, 3-gram量による)
(2)2-gramのN-gramインデックスを32bit→24bitに縮小
- 仕様変更
- N-gramのインデックス圧縮に伴い,バイナリN-gramのファイル形式が新し
くなった.古いのもそのまま読み込める(内部で新形式に自動変換される)
が,以下のようにすることで,あらかじめ新しい形式にしておくことができる.
"mkbingram -d oldbinary newbinary"
なお,本バージョンの mkbingram で出力したバイナリN-gramは新形式な
ので,3.4.2以前では読めないことに注意すること.
(参考:形式はファイルの最初の17バイトで判別できる:
"julius_bingram_v3" なら古いバージョン,
"julius_bingram_v4" なら新しいバージョン)
- adintool との接続:ネットワーク上のバイトオーダをリトルエンディア
ンに固定した.
- デフォルトで圧縮展開に zlib ライブラリを使用するようになった.
従来は外部 gzip を使用."--disable-zlib" でOFF (従来どおり) に変更可能
- Win: 出力文字コードのデフォルトを「変換なし」に変更.
3.4.2ではデフォルトで SJIS に変換していた.
- Win: VC++でのコンパイル方法を変更
Julianは -DBUILD_JULIAN をつける.julius.h を変更しなくて良い.
詳細は 00HowToCompile-win.txtを参照のこと
- バグ修正
- スペクトルサブトラクションが動かないバグを修正
- 第2パスで stack empty で終了時にメモリリークが生じていたバグを修正
- 非常に短時間(数フレーム)の入力で落ちるバグを修正
- CMN非使用の音響モデル使用時に音声ファイル・マイク入力できないバグを修正
- 逐次デコーディング(--enable-sp-segment)におけるsp単語扱いのバグを修正
- maxcodebooksize が表示されないバグを修正
- stack empty で探索失敗時に得られた候補数を表示
- モジュールモードで -separatescore に対応 (AMSCORE=..., LMSCORE=...)
- 全探索オプション "-b 0" 時にビーム幅が文法追加時に更新されないバグを修正
- 文法変更時に単語間トライフォンの計算が設計と異なっていたバグを修正
- 複数文法使用時に,認識結果の文法IDを標準出力でも出力するよう修正
- エンディアンの異なるマシン間で音声データの送受信に対応
- Linux: USBオーディオ使用時にマイク入力が動作しないことがあるバグを修正
- Linux: iccでコンパイルしたJuliusが起動時に落ちるバグを修正
- Win: 改行コード対応(文法ファイル・-filelist)
- Win: cygwin環境で mkdfa.pl がテンポラリを開けないバグを修正
- Win: ZLIB非使用時にfopenに失敗することがあるバグを修正
- Win: -record で録音したファイルの拡張子が .raw だったのを .wav に修正
- ソースの統合
- Linux版 と Windows コンソール版でソースを統合
- Multipath 版のソースを統合
"--enable-multipath" とすることで,モデルの遷移に制限のない
multipath 版をコンパイルすることができる.ソース内部では
"MULTIPATH_VERSION" の定義で切り替えている.
- その他
- Win: MinGW でコンパイルできるようになった.
- プログラム中のコメントの大規模な更新:Doxygen に対応.
"make doxygen" で HTML 形式のクロスリファレンスを生成できる.
- make install 時,"julius-3.5-fast" のようにバージョン番号と設定
(--enable-setup の値)をつけた実行バイナリを追加インストールするよう設定
- "./support/build-all.sh" で各設定の julius, julian および全ての実行バイナ
リをコンパイルして build-bin/ 以下に生成できるようにした.
- Updated LICENSE.txt with English translation for reference.
3.4.2 (2004.03.31)
===================
- 指定時間より短い入力を棄却する -rejectshort msec を追加
- (-input adinnet) モジュールモード併用時のPAUSE/TERMINATEを安定化
- バグ修正
- 数フレームの入力時のメモリリークを修正 (beam.c)
- 数単語の認識でN-best候補が正しく出ないことがある不具合を修正
- generate の無限ループを修正
- 整形
- 'gcc -Wall' に合わせてソースを整形
- copyright 表示を 2004 年へ更新
- config.guess, config.sub を更新 (for MacOSX)
3.4.1 (2004.02.25)
===================
- 探索の安定化に向けたアルゴリズムの改善
- 単語展開時の言語スコアの多重計算を修正
- 単語間トライフォンの新たなスコア計算方法を実装(-iwcd1 best #)
バージョン3.4 以前と比べて認識精度が改善される可能性があります!
- バイナリHMM形式(Julius専用)のサポート
通常のhmmdefsからバイナリ形式に変換するツール "mkbinhmm" の追加
- MFCC特徴量抽出がより高速になった(sin/cosテーブルを使用)
- 以下のバグを修正
- (-input adinnet) 音声の受信開始と同時に認識を開始しない
- (-input adinnet) モジュールモードとの併用時にPAUSE/TERMINATEが効かない
- (-input adinnet) プロセスを不必要に fork する
- (-input rawfile) Windowsのサウンドレコーダーで録音した wav ファイル
を読めない
- (音響モデル) CMNが不要な音響モデルでもCMNを行っていた
- (音響モデル) triphone エラー時に大量のメッセージを吐いていた
- (adintool) 連続ファイル送信ができなかった
- (sp-segment) ショートポーズでの探索再開・中断に関するバグの修正,および
マイク入力でのショートポーズセグメンテーションの実現
- (-[wps]align) 連続入力時のメモリリークを修正
- 音声入力のDC成分の除去機能を追加 (-zmean)
- (-module) 新出力 '<INPUTPARAM FRAMES="入力フレーム長" MSEC="入力ミリ秒">'
- おまけ機能「探索空間の可視化」を追加
- HTMLドキュメントを大幅に更新
- rev.3.3 から現在までの変更の詳細を whatsnew/ 以下に記述
新オプション:"-iwcd1 best #" "-zmean"
新configureオプション:"--disable-lmfix", "--enable-visualize"
3.4 (2003.10.01)
===================
- 確信度計算のサポート
- "-cmalpha" オプションでスムージング係数を指定
- モジュールモードでの確信度出力は "-outcode" で 'C' を指定
- configure時 "--disable-cm"で無効化
- "--enable-cm-nbest"でN-bestを用いた計算方法に変更可能
- クラスN-gramのサポート
- configure時 "--disable-class-ngram"で無効化
- factoringノード決定をN-gram単語ベースから辞書単語ベースに変更
- adinrec, adintoolおよびオプション"-record"での音声記録形式を
RAW形式からWAV形式に変更
- 出力メッセージの変更:
System Info のメッセージ構成
エンジン設定のメッセージ
- 修正:
モジュールモードの出力のバグをいくつか修正
数フレーム入力されたときに落ちるバグを修正 (realtime-1stpass.c)
検出された音声区間の末尾の無音が長い不具合を修正
NetAudio使用時にコンパイルに失敗するバグを修正
バイナリN-gram作成時のワードサイズをチェックするよう修正
mixture欠け時の音響尤度計算の誤りを修正 (gprune_none.c)
"-version"->"-setting", "-hipass"->"-hifreq", "-lopass"->"-lofreq"
3.3p4 (2003.05.06)
===================
- 音声入力のいくつかの不具合を改善
- マイク入力で長時間動作させたときに突然ハングアップする不具合を修正
- モジュールモードで,入力音声が長すぎたときにクライアントがハングアッ
プする不具合の修正(クライアントにエラーメッセージを送信するようになっ
た)
- 1000サンプル以下の短い入力に対するバッファリングの改良.
- ネットワーク経由の音声入力におけるブロッキングの改良.
- ソースの見栄えの修正 (jcontrolのtypo, 定数LOG_TENを定義,など)
3.3p3 (2003.01.08)
===================
- 単語間ショートポーズの扱いが新たに追加された.
- [Julius] "-iwspword" でショートポーズに対応する単語エントリを認識
辞書に自動追加するようになった.追加される単語のN-gramエントリや
出力文字列,音響HMM列はデフォルトでは"<UNK> [sp] sp sp"で,オプション
"-iwspentry" で指定可能.
- [マルチパス版] より短時間のcontext-freeな単語間の無音に対応した.
オプション "-iwsp" で,辞書中の全単語の読みの末尾にスキップ可能な
ショートポーズモデルを付加する.付加するモデルは "-spmodel" で変更
可能.詳細は別ドキュメントを参照のこと.
- 音声入力部の改善:
- 入力の遅延を改善:これにより,マイク入力の遅延が,
従来の 200ms 前後から 50ms 前後に改善された.
- 音声デバイスが他のプロセスで使用中の場合に,ブロックせずにエラー
終了するように変更.
- 最新デバイス環境に対応:
- libsndfile-1.0.x に対応.
- ALSA-0.9.x に対応.
自動検出では OSS が優先されるので,使用するには configure 時に
"--with-mictype=alsa" を明示的に指定すること.
3.3p2 (2002.11.18)
===================
- [マルチパス版] モデルスキップ遷移に対応した.音響モデルの初期状態か
ら最終状態への(出力状態を系列上に含まない)遷移をサポートした.これ
により,これ以降のバージョンは HTK の「全ての」状態遷移をサポートし
たことになる.
- 新機能: "-record dir" で,Juliusに入力された音声データを全て指定ディ
レクトリ下に逐次記録していく機能の追加.
- 以下のバグを修正
- Solaris で MFCC ファイル入力時に落ちる.
- "-module" と "-input adinnet" 併用時に,クライアントからのコマンドを
受け付けなくなる.
- 最後の認識結果がバッファリングされ正しいタイミングで端末出力されない.
3.3p1 (2002.10.15)
===================
以下のバグを修正:
- 第2パスの言語モデルの重みとペナルティのデフォルト値が0になっていた.
- 辞書に複数スペースがあると読み込みに失敗する.
- monophone 使用時に -separatescore の出力がおかしくなる.