Sopro (offline, voice clone, 4 languages)

機能

インストールの前に

Sopro はコンピューターにあまり負担をかけません：

• ディスク： モデル用に約 340 MB。最初のセリフでダウンロードされます。
• メモリ： 話している間は約 1 GB。
• プロセッサー： 64 ビットの Intel または AMD のプロセッサーならどれでも、または Apple Silicon。グラフィックスカードは使いません。

声のクローンは、その声の持ち主の同意がある場合だけにしてください。Sopro の作者は、他人になりすますために使わないよう求めています。

声

話者タブで、話者の吹き替えエンジンとして Sopro を選び、ボイスを選びます。各セリフを字幕に合わせて伸縮するには、その話者の吹き替えを字幕の長さに合わせるをオンにしてください。

音声 9 種.

Speaker's own voice を選ぶと、Subtitld はプロジェクトの音声からその話者のサンプルを切り出します。字幕1つから、または短い字幕をいくつかつなげて作ります。この動画で音楽と声を分離している場合は、サンプルは声だけから取られます。アドオンの設定の Fallback reference clip は、サンプルを切り出せない場合にのみ使われます。最適なサンプルは、音楽やほかの声がなく、その話者だけが話している5〜20秒の音声です。

既製の声はどれも、その言語で本を朗読する LibriVox のボランティアです。どの既製の声も4言語すべてを話します。声の元の言語はなまりに影響するだけなので、最も自然な吹き替えにするには、プロジェクトの言語の声を選んでください。

モデル

Sopro のモデルは、4言語すべてに共通の1つです。アドオンには含まれておらず、最初に吹き替えるときに、固定されたリビジョンで Hugging Face から Subtitld の共有モデルキャッシュへダウンロードされ、各ファイルが確認されます。中断したダウンロードは、止まったところから再開します。アドオンを更新・削除してもモデルは残ります。

アドオンは、Sopro の作者が公開している ONNX 版を PyTorch なしで実行します。4言語すべての同じセリフで公式の PyTorch 版と比べたところ、ミスが増えることはなく、話者への似かたも同程度でした。

オプション

設定 › アドオン › Sopro (offline, voice clone, 4 languages) › 設定 で変更できます。

言語

英語、ヨーロッパポルトガル語、フランス語、ドイツ語。ブラジルポルトガル語のテキストも読めますが、ヨーロッパのなまりになります。それ以外の言語のプロジェクトでは、その旨のメッセージが表示されます。その場合は別の吹き替えエンジンを選んでください。

大事な箇所では、数字や記号を言葉で書いてください。Sopro は「1 + 2」を「one plus two」ほど確実には読めません。文中にほかの言語の単語があると、発音を誤ることがあります。

• en
• pt
• fr
• de

プラットフォーム

Linux x86-64、Apple Silicon の macOS、Windows x86-64。各リリースは3つすべてでビルドされ、それぞれで CI が Subtitld と同じ方法でアドオンをインストールし、モデルをダウンロードして、それを使って吹き替えます。

トラブルシューティング

• network_unavailableモデルをダウンロードできませんでした。接続を確認して、もう一度試してください。ダウンロードは再開されます。
• disk_fullモデルに必要なディスク容量（約 340 MB）がありません。
• unsupported_languageプロジェクトの言語が4言語のどれでもないか、設定されていません。プロジェクトで言語を設定するか、別の吹き替えエンジンを選んでください。
• unsupported_voiceプロジェクトに、このバージョンにない声が指定されています。話者タブで声を選び直してください。
• bad_paramsセリフにテキストがないか、クローンの声にサンプルがありません。動画を開くか、Fallback reference clip を設定してください。どちらかはメッセージに表示されます。
• out_of_memoryコンピューターのメモリが不足しました。ほかのプログラムを閉じてください。Sopro には約 1 GB が必要です。
• internalアドオン内部で問題が起きました。詳細はメッセージに表示されます。

ライセンス

商用利用に問題ありません。アドオン、Sopro、Sopro V2 Turbo のモデルは Apache-2.0 です。既製の声は LibriVox の録音で、パブリックドメインです。英語の声は CC-BY-4.0 の LibriTTS-R を経由したもので、アドオンはそれぞれのクレジットを表示しています。作成した吹き替えはあなたのものです。