Sopro (offline, voice clone, 4 languages)

Was es tut

Vor der Installation

Sopro verlangt Ihrem Computer wenig ab:

• Festplatte: rund 340 MB für das Modell, heruntergeladen bei der ersten Zeile.
• Arbeitsspeicher: rund 1 GB beim Sprechen.
• Prozessor: jeder 64-Bit-Prozessor von Intel oder AMD oder Apple Silicon. Eine Grafikkarte wird nicht verwendet.

Klonen Sie eine Stimme nur mit dem Einverständnis der Person, der sie gehört. Der Autor von Sopro bittet darum, es nie zu verwenden, um sich als jemand anderes auszugeben.

Stimmen

Im Tab Sprecher wählen Sie Sopro als Synchronisations-Engine eines Sprechers und danach eine Stimme. Aktivieren Sie Synchronaufnahme an Untertiteldauer anpassen, damit der Sprecher jede Zeile auf ihren Untertitel streckt oder staucht.

9 Stimmen.

Mit Speaker's own voice schneidet Subtitld eine Probe dieses Sprechers aus dem Audio des Projekts, aus einem seiner Untertitel oder mehreren kurzen, zusammengefügt. Haben Sie für dieses Video die Musik von der Stimme getrennt, stammt die Probe nur von der Stimme. Fallback reference clip in den Einstellungen der Erweiterung wird nur verwendet, wenn keine Probe geschnitten werden kann. Die beste Probe sind 5 bis 20 Sekunden, in denen nur der Sprecher zu hören ist, ohne Musik und andere Stimmen.

Hinter jeder voreingestellten Stimme steht eine Person, die für LibriVox ehrenamtlich ein Buch in dieser Sprache liest. Jede voreingestellte Stimme spricht alle vier Sprachen; ihre eigene Sprache gibt ihr nur einen Akzent. Wählen Sie für die natürlichste Synchronisation also eine aus der Sprache Ihres Projekts.

Modelle

Sopro hat ein Modell für alle vier Sprachen. Es steckt nicht in der Erweiterung: Es wird beim ersten Vertonen in den gemeinsamen Modell-Cache von Subtitld geladen, von Hugging Face in einer festen Revision, jede Datei geprüft. Ein unterbrochener Download wird dort fortgesetzt, wo er stehen blieb. Aktualisieren oder Entfernen der Erweiterung behält das Modell.

Die Erweiterung führt den ONNX-Build von Sopro aus, den sein Autor veröffentlicht, ohne PyTorch. Wir haben ihn mit dem offiziellen PyTorch-Build an denselben Zeilen in allen vier Sprachen verglichen: Er machte nicht mehr Fehler und klang dem Sprecher ebenso ähnlich.

Optionen

In Einstellungen › Erweiterungen › Sopro (offline, voice clone, 4 languages) › Konfigurieren.

Sprachen

Englisch, europäisches Portugiesisch, Französisch und Deutsch. Text in brasilianischem Portugiesisch wird ebenfalls gelesen, mit europäischem Akzent. Ein Projekt in einer anderen Sprache bekommt eine Meldung, die das sagt: Wählen Sie dafür eine andere Synchronisations-Engine.

Schreiben Sie Zahlen und Symbole aus, wo es darauf ankommt: Sopro liest „1 + 2“ weniger zuverlässig als „eins plus zwei“. Ein Wort aus einer anderen Sprache mitten im Satz kann falsch ausgesprochen werden.

• en
• pt
• fr
• de

Plattformen

Linux x86-64, macOS auf Apple Silicon und Windows x86-64. Jede Version wird auf allen dreien gebaut, und auf jedem installiert die CI die Erweiterung so, wie Subtitld es tut, lädt das Modell herunter und vertont damit.

Fehlerbehebung

• network_unavailableDas Modell konnte nicht heruntergeladen werden. Prüfen Sie Ihre Verbindung und versuchen Sie es erneut: Der Download wird fortgesetzt.
• disk_fullNicht genug Speicherplatz für das Modell, rund 340 MB.
• unsupported_languageDie Sprache des Projekts ist keine der vier oder nicht festgelegt. Legen Sie sie im Projekt fest oder wählen Sie eine andere Synchronisations-Engine.
• unsupported_voiceDas Projekt nennt eine Stimme, die diese Version nicht hat. Wählen Sie die Stimme im Tab Sprecher erneut.
• bad_paramsDie Zeile hat keinen Text, oder die Klonstimme hat keine Probe bekommen: Öffnen Sie das Video oder setzen Sie Fallback reference clip. Die Meldung sagt, was zutrifft.
• out_of_memoryDem Computer ist der Arbeitsspeicher ausgegangen. Schließen Sie andere Programme: Sopro braucht rund 1 GB.
• internalIn der Erweiterung ist etwas fehlgeschlagen; die Meldung enthält die Details.

Lizenz

Für kommerzielle Arbeit geeignet: Die Erweiterung, Sopro und das Modell Sopro V2 Turbo stehen unter Apache-2.0. Die voreingestellten Stimmen sind LibriVox-Aufnahmen und gemeinfrei; die englischen stammen über LibriTTS-R, unter CC-BY-4.0, und die Erweiterung nennt jede Sprecherin und jeden Sprecher. Die Synchronisationen, die Sie erstellen, gehören Ihnen.