Reverb çevrimdışı, ses klonlama, 7 dil, ticari olmayan
Altyazılarınızı Software Mansion AI Labs'in Reverb-TTS'iyle İngilizce, Almanca, Fransızca, İspanyolca, İtalyanca, Lehçe ve Portekizce seslendirir: 16 sesten biriyle ya da her konuşmacının videonun birkaç saniyesinden ve altyazılarından klonlanan kendi sesiyle. Ekran kartı gerekmeden kendi bilgisayarınızın işlemcisinde çalışır. Model yalnızca ticari olmayan kullanım içindir.
Ayarlar Eklentiler Reverb (offline, voice clone, 7 languages, non-commercial) Yükle
Subtitld indirir, SHA-256 değerini denetler ve güncel tutar.
- Diller
- 7
- Modeller
- 3
- Sesler
- 17
- Eklenti indirmesi
- 40–65 MB
- En az RAM
- 2.5 GB
Ne yapar
İngilizce, Almanca, Fransızca, İspanyolca, İtalyanca, Lehçe ve Portekizce. Sayılar, tarihler, fiyatlar ve birimler her dilin kendi biçimiyle sözcük olarak okunur.
Subtitld her konuşmacının videodan birkaç saniyesini keser ve içinde konuşulan altyazılarla birlikte gönderir. Reverb o sesi yedi dilinden herhangi birinde klonlar. Ya da 16 sesten birini seçin.
Exact, modeli yayımlandığı gibi çalıştırır. Fast yaklaşık iki kat hızlıdır ve indirmesi daha küçüktür; karşılığında doğruluktan biraz kaybeder.
Model bir kez, bir satır ona ilk kez ihtiyaç duyduğunda iner. Bundan sonra hiçbir şey bilgisayarınızdan dışarı çıkmaz.
Ticari olmayan model. Reverb-TTS ağırlıkları ve hazır sesleri CC-BY-NC-4.0 altındadır ve bu lisans ticari kullanıma izin vermez. Eklentinin kodu Apache-2.0'dır, ama bu ağırlıkların koşullarını değiştirmez. Ticari işler için ZONOS3-Mini de bu yedi dilin hepsinde ses klonlar ve ağırlıkları Apache-2.0'dır.
Kurmadan önce
- Disk: model için 640 MB, ilk satırda iner; ilk satırdan önce Fast'i seçerseniz bunun yerine 378 MB. Bir konuşmacının kendi sesini ilk kullandığınızda 327 MB daha.
- Bellek: konuşurken yaklaşık 1,5 GB.
- Süre: başka işlerle meşgul bir Intel Core i7-13700T'de bir saniyelik konuşmanın yapılması Exact hızında yaklaşık 0,8 saniye, Fast'te yaklaşık 0,6 saniye sürdü.
- İşlemci: 64 bit bir Intel ya da AMD işlemci veya Apple Silicon. Ekran kartı kullanılmaz.
Sesler
Konuşmacılar sekmesinde, bir konuşmacının Dublaj motoru olarak Reverb'ü seçin, sonra bir Ses seçin. Konuşmacının her satırı altyazısına göre uzatması ya da sıkıştırması için Dublajı altyazı süresine sığdır seçeneğini açın.
17 ses.
| Kaydedildiği dil | Kadın | Erkek |
|---|---|---|
| İngilizce | Anlatıcı, fısıltı | Anlatıcı 1, anlatıcı 2, öfkeli |
| Fransızca | Fransız kadın | Fransız erkek |
| Almanca | Alman kadın | Alman erkek |
| İtalyanca | İtalyan erkek, etkileyici İtalyan erkek | |
| Lehçe | Polonyalı erkek | |
| Portekizce | Portekizli kadın | Portekizli erkek |
| İspanyolca | İspanyol erkek 1, İspanyol erkek 2 |
Bunlar Reverb'ün kendi hazır sesleridir. Her ses her dili konuşur, ama kaydedildiği dilin aksanıyla. Burada kendine ait bir sesi ya da kadın sesi olmayan bir dil için konuşmacının kendi sesini kullanın.
Speaker's own voice ile Subtitld projenin sesinden o konuşmacının bir örneğini keser (altyazılarından birinden ya da birleştirilmiş birkaç kısa altyazıdan) ve içinde söyleneni, yani o altyazıların metnini gönderir. Reverb'ün ikisine de ihtiyacı vardır. Örnekten ve onun sözcüklerinden devam eder; sözcükler olmadan her satırın ilk sözcüklerini atlardı.
Bu yüzden altyazılar videoda konuşulan dilde olmalıdır. Onları çevirdiyseniz, Subtitld sesin hangi dilde olduğunu bildiği sürece özgün metni gönderir: bunu Yazıya dökme panelinde Altyazı dili altında ayarlayın. Aksi hâlde satır bunu belirten bir mesajla durur. Söyleneni yazıya dökmek yerine başka sözcüklerle aktaran altyazılar klonu kötüleştirir.
En iyi örnek, tek bir kişinin konuştuğu, temiz ve mikrofona yakın 3 ila 10 saniyedir. 2 saniyeden kısa bir örnek reddedilir, 15 saniyeden uzun bir örnek ise genellikle daha kötü satırlar verir. Eklentinin ayarlarındaki Fallback reference clip, Fallback clip's transcript ile birlikte, yalnızca bir örnek kesilemediğinde kullanılır.
Her satır Subtitld'nin gönderdiği tohumla yapılır, bu yüzden aynı seste aynı satır her seferinde aynı çıkar.
Modeller
Model eklentinin içinde değildir: bir satır ona ilk kez ihtiyaç duyduğunda, Reverb'ün ağırlıklarının ONNX Runtime için dönüştürülmüş olarak tutulduğu eklentinin GitHub'daki kendi sürümünden, her dosyası denetlenerek Subtitld'nin paylaşılan model önbelleğine iner. Yarıda kalan bir indirme kaldığı yerden devam eder. Eklentiyi güncellemek ya da kaldırmak onu tutar.
| Model | İndirme | Uygun olduğu |
|---|---|---|
| Reverb-TTS v1.0.0 (ONNX, full precision) with the Higgs Audio v2 decoder and 16 preset voices Varsayılan reverb | Varsayılan Exact hızında her satır: ağ, kod çözücü ve 16 ses | |
| Reverb-TTS v1.0.0 network in int8 (Fast mode) reverb-fast | Fast hızında her satır, Exact ağının yerine: kod çözücüyle birlikte toplam 378 MB | |
| Higgs Audio v2 encoder (voice cloning) reverb-codec-encoder | Konuşmacının kendi sesi, onunla ilk seslendirmede |
Exact ve Fast kod çözücüyü ve sesleri paylaşır (111 MB): yalnızca ağ farklıdır, Exact için 529 MB, Fast için 266 MB. Sonradan birinden ötekine geçmek, bir satır ona ilk kez ihtiyaç duyduğunda öteki ağı indirir.
Eklenti Reverb'ü PyTorch olmadan ONNX Runtime üzerinde çalıştırır. Reverb'ün örnekleyicisi ve metin hazırlığı Software Mansion'ın kendi kodundan aktarılmıştır. Rastgele sayıları başka bir kaynaktan gelir, bu yüzden bir tohum burada Reverb'ün kendi paketindekinden farklı bir sonuç verir; Exact ağının o paketin öngördüğünü öngördüğü denetlenmiştir.
Seçenekler
Ayarlar › Eklentiler › Reverb (offline, voice clone, 7 languages, non-commercial) › Yapılandır bölümünde.
00, bilgisayarın mantıksal işlemcilerini, en çok 8 tanesini kullanır. Daha fazlası nadiren daha hızlıdır; daha azı seslendirme sırasında bilgisayarı daha duyarlı tutar.
8Modelin her satır üzerinden kaç geçiş yaptığı. 8, Reverb'ün kendi ayarıdır; daha azı daha hızlıdır, ama daha çok hata yapar.
exactExact, modeli Software Mansion'ın yayımladığı gibi çalıştırır. Fast onu 8 bit tamsayılarla, yaklaşık iki kat hızlı, kendi 266 MB'lık indirmesiyle çalıştırır: satırları genellikle aynı duyulur, ama yayımlanan modelden daha çok sapar ve daha sık hata yapar.
Subtitld videodan bir klip kesemediğinde klon ses için bir klip, örneğin açık bir video yokken: tek bir kişinin konuştuğu 3 ila 10 saniye, temiz.
Yedek klipte söylenenin tam olarak kendisi, sözcüğü sözcüğüne. Reverb klipten ve sözcüklerinden klonlar, bu yüzden bu metin olmadan yedek klip reddedilir.
Diller
İngilizce, Almanca, Fransızca, İspanyolca, İtalyanca, Lehçe ve Portekizce. Başka bir dildeki proje bunu belirten bir mesaj alır: o proje için başka bir dublaj motoru seçin.
endefresitplpt
Platformlar
| Sistem | İndirme | Test edildi |
|---|---|---|
| Linux x86-64 | 64.9 MB | CI'da gerçek modelle yedi dilin hepsi seslendirildi ve bir ses klonlandı |
| macOS (Apple silicon) | 45.6 MB | CI'da gerçek modelle yedi dilin hepsi seslendirildi ve bir ses klonlandı (Apple Silicon) |
| Windows x86-64 | 40.5 MB | CI'da gerçek modelle yedi dilin hepsi seslendirildi ve bir ses klonlandı |
Linux x86-64 (Ubuntu 22.04, Debian 12 ya da Fedora 36'daki gibi glibc 2.35 veya daha yenisi), Apple Silicon'da macOS ve Windows x86-64. Her sürüm üçünde de derlenir ve her birinde CI eklentiyi Subtitld'nin yaptığı gibi kurar, modeli indirir, her dilde bir satır seslendirir ve bir ses klonlar.
Sorun giderme
network_unavailableModel indirilemedi. Bağlantınızı denetleyip yeniden deneyin: indirme kaldığı yerden devam eder.disk_fullModel için yeterli disk alanı yok: 640 MB (Fast'te 378 MB) ve konuşmacının kendi sesi için 327 MB daha.unsupported_languageProjenin dili bu yedi dilden biri değil ya da ayarlanmamış. Dili projede ayarlayın ya da başka bir dublaj motoru seçin.unsupported_voiceProje bu sürümde olmayan bir sesi adlandırıyor. Sesi Konuşmacılar sekmesinde yeniden seçin.bad_paramsSatırın metni yok ya da klon ses bir örnek veya örneğin yazıya dökümünü alamadı. Çevrilmiş bir proje için Altyazı dili seçeneğini konuşulan dile ayarlayın; açık video yoksa bir Fallback reference clip ve onun yazıya dökümünü ayarlayın. Mesaj hangisi olduğunu söyler.out_of_memoryBilgisayarın belleği tükendi. Diğer programları kapatın: Reverb yaklaşık 1,5 GB boş bellek ister.internalEklentinin içinde bir şey başarısız oldu; ayrıntılar mesajda.
Lisans
Eklenti Apache-2.0'dır, aktardığı Reverb kodu da öyle. Reverb-TTS ağırlıkları ve 16 hazır sesi CC-BY-NC-4.0'dır: yalnızca ticari olmayan kullanım. Modelle gelen bir lisans dosyası, dönüştürülürken neyin değiştirildiğini söyler. ONNX Runtime MIT'dir; sayıları ve tarihleri okuyan Verbalis de MIT'dir.
Sorumlu kullanın. Klonlanmış bir ses gerçek bir kişi gibi duyulur. Yalnızca kullanma hakkınız olan sesleri, konuşmacının onayıyla klonlayın; gerçek kişilerin kimliğine bürünmeyin ve yaptığınız konuşmayı aldatmak, dolandırmak ya da taciz etmek için kullanmayın. Dinleyicilerinize yapay bir ses duyduklarında bunu söyleyin.
Sürümler
- 26.11.1
Text-to-speech for Subtitld with Reverb-TTS v1.0.0 (Software Mansion AI Labs): English, German, French, Spanish, Italian, Polish and Portuguese at 24 kHz, in 16 preset voices or in the speaker's own voice, cloned from a clip of the video and its subtitles.
The archive holds the add-on, ONNX Runtime, tokenizers and Verbalis. The model (640 MB, or 378 MB in Fast mode) downloads on the first line, and the codec encoder (327 MB) on the first cloned line, from this repository's
models-1release and Reverb's own repository. Every file is pinned and checked by sha256. It runs on the CPU.The model is licensed under CC BY-NC 4.0: non-commercial use only. The add-on is Apache-2.0, and so is Reverb's code it ports. Each archive carries
THIRD_PARTY_LICENSES/with the licence of everything frozen into it. The Linux archive carries libquadmath (LGPL-2.1, with numpy); its complete source isreverb-<version>-libquadmath-source.tar.gzin this release.
Diğer Sesler eklentileri
-
Piper Çevrimdışı
49 dilde 158 çevrimdışı ses, her biri ayrı küçük bir indirme.
-
Kokoro Çevrimdışı
54 çevrimdışı ses, dokuz dilde; hepsi tek bir 82 MB modelden.
-
Supertonic Çevrimdışı
On çevrimdışı ses; her biri 31 dilin tamamını konuşabilir.
-
sanoTTS Çevrimdışı
Küçük çevrimdışı sesler, 14 dilde 28 tane; her biri 10 MB'ın altında.
-
Parler-TTS Çevrimdışı
Yazılı bir betimlemeyi izleyen İngilizce sesler; 34 adlandırılmış konuşmacı.
-
Qwen3-TTS Klon
On dil, dokuz ses ve 3 saniyeden konuşmacı klonlama.
-
Coqui XTTS Klon
On altı dilde ses klonlama; ticari olmayan model lisansı.
-
F5-TTS Klon
Yalnızca ses klonlama; İngilizce ve Çince; ticari olmayan model.
-
VoxCPM2 Klon
48 kHz'de 30 dil, konuşmacının kendi sesiyle ya da tarif edilen bir sesle. Ağır.
-
Pocket TTS Çevrimdışı
Hızlı ve hafif, yalnızca CPU. Yedi Avrupa dilinde 23 ses.
-
Sopro Klon
Konuşmacının kendi sesi, CPU'da hızlı. Dört dil.
-
KittenTTS 2 Klon
Konuşmacının kendi sesi 16 dilde, CPU'da. Ağırlıklar kısıtlayıcı bir lisans altında.
-
Ming-3.0-tts Klon
44,1 kHz'de 7 dil: klonlanan, yerleşik ya da tarif edilen sesler, duyguyla. Ağır.
-
Scylla's Band Çevrimdışı
Altı dilde on dört ses, CPU'da hafif ve hızlı. Yalnızca hazır sesler.
-
Audio8 TTS Klon
Kantonca ve Arapça dahil 23 dilde konuşmacının kendi sesi. CPU'da yavaş.
-
Inflect Çevrimdışı
Minicik bir modelden doğal İngilizce konuşma, her CPU'da hızlı.
-
Paradee Çevrimdışı
Tek bir 8,5 MB'lık modelden Amerikan ve İngiliz aksanlı dört doğal İngilizce ses.
-
BlueTTS Klon
İbranice ve Yidiş, artı beş dil daha. Konuşmacının kendi sesi, CPU'da hızlı.
-
ZONOS3-Mini Klon
Arapçadan Vietnamcaya 43 dil. Konuşmacının kendi sesi, CPU'da.
-
Chatterbox Klon
Offline TTS in 20 languages, in the speaker's own voice cloned from a few seconds of the video or in one of 8 preset…