Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

追加: TTSEngine.create_accent_phrases_from_kana() #983

Merged

Conversation

tarepan
Copy link
Contributor

@tarepan tarepan commented Jan 7, 2024

内容

TTSEngine.create_accent_phrases_from_kana() の追加

VOICEVOX ENGINE では TTS 関連機能を TTSEngine クラスへ集約し、run.py でそのメソッドをコールしている。
しかし run.pyaccent_phrases(is_kana=True) では個別関数を複数コールしている。
これらは TTSEngine へ集約できる。

このような背景から、is_kana=True フローを集約した TTSEngine.create_accent_phrases_from_kana() の追加を提案します。

関連 Issue

無し

@tarepan tarepan requested a review from a team as a code owner January 7, 2024 05:04
@tarepan tarepan requested review from y-chan and removed request for a team January 7, 2024 05:04
Copy link

github-actions bot commented Jan 7, 2024

Coverage Result

Resultを開く
Name Stmts Miss Cover
run.py 514 328 coverage-36%
voicevox_engine/init.py 1 0 coverage-100%
voicevox_engine/cancellable_engine.py 94 72 coverage-23%
voicevox_engine/core_adapter.py 51 17 coverage-67%
voicevox_engine/core_initializer.py 59 30 coverage-49%
voicevox_engine/core_wrapper.py 224 159 coverage-29%
voicevox_engine/dev/core/init.py 2 0 coverage-100%
voicevox_engine/dev/core/mock.py 36 8 coverage-78%
voicevox_engine/dev/tts_engine/init.py 2 0 coverage-100%
voicevox_engine/dev/tts_engine/mock.py 27 0 coverage-100%
voicevox_engine/engine_manifest/EngineManifest.py 34 0 coverage-100%
voicevox_engine/engine_manifest/EngineManifestLoader.py 12 0 coverage-100%
voicevox_engine/engine_manifest/init.py 3 0 coverage-100%
voicevox_engine/library_manager.py 92 5 coverage-95%
voicevox_engine/metas/Metas.py 34 0 coverage-100%
voicevox_engine/metas/MetasStore.py 18 6 coverage-67%
voicevox_engine/metas/init.py 2 0 coverage-100%
voicevox_engine/model.py 162 9 coverage-94%
voicevox_engine/morphing.py 71 46 coverage-35%
voicevox_engine/part_of_speech_data.py 5 0 coverage-100%
voicevox_engine/preset/Preset.py 13 0 coverage-100%
voicevox_engine/preset/PresetError.py 2 0 coverage-100%
voicevox_engine/preset/PresetManager.py 80 2 coverage-98%
voicevox_engine/preset/init.py 4 0 coverage-100%
voicevox_engine/setting/Setting.py 11 0 coverage-100%
voicevox_engine/setting/SettingLoader.py 17 0 coverage-100%
voicevox_engine/setting/init.py 3 0 coverage-100%
voicevox_engine/tts_pipeline/init.py 3 0 coverage-100%
voicevox_engine/tts_pipeline/acoustic_feature_extractor.py 27 0 coverage-100%
voicevox_engine/tts_pipeline/kana_converter.py 88 1 coverage-99%
voicevox_engine/tts_pipeline/mora_list.py 7 0 coverage-100%
voicevox_engine/tts_pipeline/text_analyzer.py 146 6 coverage-96%
voicevox_engine/tts_pipeline/tts_engine.py 195 11 coverage-94%
voicevox_engine/user_dict.py 145 12 coverage-92%
voicevox_engine/utility/init.py 5 0 coverage-100%
voicevox_engine/utility/connect_base64_waves.py 37 0 coverage-100%
voicevox_engine/utility/core_version_utility.py 8 1 coverage-88%
voicevox_engine/utility/mutex_utility.py 13 0 coverage-100%
voicevox_engine/utility/path_utility.py 35 9 coverage-74%
voicevox_engine/utility/run_utility.py 10 7 coverage-30%
TOTAL 2292 729 coverage-68%

@Hiroshiba Hiroshiba requested review from Hiroshiba and removed request for y-chan January 7, 2024 07:42
Copy link
Member

@Hiroshiba Hiroshiba left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

この変更は一長一短かもしれません。
今まではkana_converterの依存はrun.pyからしかなかったのですが、これでTTSEngineからの依存が生まれそうです。

AquesTalk風記法はtts_pipelineと関係ないとする方針と、関係あるようにする方針がありそうです。
分けられるなら分けたほうが良い気がしますが、AquesTalk風記法もTTSだというのもそうな気がしないでもないなぁ、という気持ちです。

(AudioQueryも同じようにTTSなのかそうじゃないのか決めることになりそう?)

@tarepan
Copy link
Contributor Author

tarepan commented Jan 7, 2024

AquesTalk風記法はtts_pipelineと ... 関係あるようにする方針 ... そうな気がしないでもない

まさに「AquesTalk風記法は tts_pipeline の一部か?」が論点だと考えており、私の感覚は「一部である」です。
以下が根拠です:

  • ユーザー目線では「日本語テキストで書くか、AquesTalk 風記法テキストで書くか」の並列関係
  • accent_phrases API では parse_kana() ルートと text_to_accent_phrases() ルートが if/else で並列関係
  • parse_kana()kana_to_accent_phrases() の意味であり、text_to_accent_phrases() と並列関係
  • tts_pipeline.kana_convertertts_pipeline のサブモジュール

今まではkana_converterの依存はrun.pyからしかなかった ... これでTTSEngineからの依存が生まれ

👍
ご指摘の通りです。
一方で逆の目線では「text_to_accent_phrases()TTSEngine 経由で抽象化されてるのに、kana_to_accent_phrases()TTSEngine で隠蔽されず run.py に漏れてる」とも言えそうです(と言うと「validate_kana API は…?」ともなりますが)。

アーキテクチャ論であるため、上記議論をベースにメンテナ判断で方向性を決めて頂くのがベターだと感じます。
どちらの方向性でしょうか?

@Hiroshiba
Copy link
Member

なるほどです!
ちょっと考えきれてないのですが、TTSの下にある形が良いように感じました。

ただまあ依存が二箇所から発生している状態に一時的になってしまうので、残ってる依存の方にメモ書きするか、方針のissueがあるか、2つPRが出ているほうが良いんだろうな〜と感じました。

Copy link
Member

@Hiroshiba Hiroshiba left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

LGTM!!

変更がきれいなので、この感じのPRはtest追加も一緒のPRで大丈夫だったりします!
(やりやすい方で!)

@Hiroshiba Hiroshiba merged commit c25c87e into VOICEVOX:master Jan 7, 2024
3 checks passed
@tarepan tarepan deleted the add/create_accent_phrases_from_kana branch January 7, 2024 13:07
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

Successfully merging this pull request may close these issues.

2 participants