Sopro (offline, voice clone, 4 languages)

SuaraLuringHanya CPUKloning suaraBoleh untuk komersial

Mengisi suara subtitle Anda dalam bahasa Inggris, Portugis Eropa, Prancis, dan Jerman dengan Sopro V2 Turbo, dengan suara asli setiap pembicara yang dikloning dari beberapa detik video, atau dengan salah satu dari 8 suara siap pakai. Berjalan di prosesor komputer Anda sendiri, sekitar dua kali lebih cepat daripada waktu nyata, tanpa kartu grafis.

Pasang dari Subtitld

Pengaturan Pengaya Sopro (offline, voice clone, 4 languages) Pasang

Subtitld mengunduhnya, memeriksa SHA-256-nya, dan menjaganya tetap diperbarui.

Sumber di GitHub
Bahasa
4
Model
1
Suara
9
Unduhan pengaya
38–61 MB
RAM, minimal
1.5 GB

Fungsinya

Suara asli pembicara

Subtitld memotong beberapa detik setiap pembicara dari video dan mengirimnya bersama setiap baris. Sopro mengkloning suara itu, sehingga dubbing terdengar seperti orang di layar, dalam salah satu dari empat bahasanya.

Cepat di komputer apa pun

Sopro V2 Turbo adalah model kecil dengan 120 juta parameter. Di prosesor laptop, model ini berbicara sekitar dua kali lebih cepat daripada waktu nyata, dengan sekitar 1 GB memori.

Offline setelah baris pertama

Model diunduh sekali, saat pertama kali Anda melakukan dubbing dengannya. Setelah itu, tidak ada yang keluar dari komputer Anda.

Gratis untuk pekerjaan komersial

Add-on, Sopro, dan modelnya semuanya Apache-2.0. Suara siap pakainya adalah pembaca LibriVox, yang rekamannya berada dalam domain publik.

Sebelum menginstal

Sopro hanya menuntut sedikit dari komputer Anda:

  • Disk: sekitar 340 MB untuk model, diunduh pada baris pertama.
  • Memori: sekitar 1 GB saat berbicara.
  • Prosesor: prosesor Intel atau AMD 64-bit apa pun, atau Apple Silicon. Kartu grafis tidak dipakai.

Kloning suara hanya dengan persetujuan pemiliknya. Pembuat Sopro meminta agar Sopro tidak pernah dipakai untuk menyamar sebagai orang lain.

Suara

Di tab Pembicara, pilih Sopro sebagai Mesin dubbing seorang pembicara, lalu pilih Suara. Aktifkan Sesuaikan dubbing dengan durasi subtitle agar pembicara itu meregangkan atau memampatkan setiap baris sesuai subtitlenya.

9 suara.

Dengan Speaker's own voice, Subtitld memotong sampel pembicara itu dari audio proyek, dari salah satu subtitlenya atau beberapa subtitle pendek yang digabung. Jika Anda sudah memisahkan musik dari suara untuk video ini, sampelnya diambil dari suara saja. Fallback reference clip di pengaturan add-on hanya dipakai ketika tidak ada sampel yang bisa dipotong. Sampel terbaik adalah 5 sampai 20 detik pembicara itu sendirian, tanpa musik atau suara lain.

Suara siap pakai
Wanita Inggris, Portugis, Prancis, Jerman
Pria Inggris, Portugis, Prancis, Jerman

Setiap suara siap pakai adalah relawan LibriVox yang membaca buku dalam bahasa itu. Setiap suara siap pakai bisa berbicara dalam keempat bahasa; bahasanya sendiri hanya memberinya aksen, jadi pilih suara dari bahasa proyek Anda untuk dubbing yang paling alami.

Model

Sopro punya satu model untuk keempat bahasa. Model ini tidak ada di dalam add-on: model diunduh ke cache model bersama Subtitld saat pertama kali Anda melakukan dubbing, dari Hugging Face pada revisi yang dipatok, dengan setiap berkas diperiksa. Unduhan yang terputus dilanjutkan dari tempat berhentinya. Memperbarui atau menghapus add-on tidak menghapus modelnya.

Model UnduhanCocok untuk
Sopro V2 Turbo (120M, ONNX) Bawaan sopro-v2-turbo
336 MB
Semua suara, dalam keempat bahasa, sekitar 2,5× waktu nyata

Add-on ini menjalankan build ONNX Sopro yang diterbitkan oleh pembuatnya, tanpa PyTorch. Kami membandingkannya dengan build PyTorch resmi pada baris yang sama dalam keempat bahasa: build ini tidak membuat lebih banyak kesalahan dan terdengar sama miripnya dengan pembicara.

Opsi

Di Pengaturan › Pengaya › Sopro (offline, voice clone, 4 languages) › Atur.

CPU threads
Bawaan: 0

0 memakai separuh prosesor logis komputer, paling banyak 8. Lebih sedikit thread membuat komputer tetap lebih responsif selama dubbing.

Variation
Bawaan: 0.8

Lebih rendah lebih stabil dan datar, lebih tinggi lebih hidup tetapi lebih sering meleset. 0,8 adalah nilai bawaan Sopro sendiri.

Fallback reference clip
Bawaan: kosong

Klip untuk suara klon ketika Subtitld tidak dapat memotongnya dari video, misalnya ketika tidak ada video yang terbuka: 5 sampai 20 detik satu orang berbicara.

Bahasa

Inggris, Portugis Eropa, Prancis, dan Jerman. Teks bahasa Portugis Brasil juga dibaca, dengan aksen Eropa. Proyek dalam bahasa lain akan mendapat pesan yang menyebutkan hal itu: pilih mesin dubbing lain untuk proyek tersebut.

Tulis angka dan simbol sebagai kata bila hal itu penting: Sopro membaca "1 + 2" kurang andal daripada "one plus two". Kata dari bahasa lain di dalam sebuah kalimat mungkin salah diucapkan.

  • en
  • pt
  • fr
  • de

Platform

Sistem UnduhanDiuji
Linux x86-64 61.1 MBDubbing dengan model asli di mesin sungguhan dan di CI
macOS (Apple silicon) 43.2 MBDubbing dengan model asli di CI (Apple Silicon)
Windows x86-64 38.1 MBDubbing dengan model asli di CI

Linux x86-64, macOS di Apple Silicon, dan Windows x86-64. Setiap rilis dibangun di ketiganya, dan di masing-masing CI menginstal add-on seperti yang dilakukan Subtitld, mengunduh model, lalu melakukan dubbing dengannya.

Pemecahan masalah

  • network_unavailableModel tidak dapat diunduh. Periksa koneksi Anda dan coba lagi: unduhan akan dilanjutkan.
  • disk_fullRuang disk tidak cukup untuk model, sekitar 340 MB.
  • unsupported_languageBahasa proyek bukan salah satu dari keempat bahasa itu, atau belum diatur. Atur bahasanya di proyek, atau pilih mesin dubbing lain.
  • unsupported_voiceProyek menyebut suara yang tidak ada di versi ini. Pilih suaranya lagi di tab Pembicara.
  • bad_paramsBaris tidak memiliki teks, atau suara klon tidak mendapat sampel: buka videonya, atau atur Fallback reference clip. Pesannya menyebutkan yang mana.
  • out_of_memoryMemori komputer habis. Tutup program lain: Sopro butuh sekitar 1 GB.
  • internalAda yang gagal di dalam add-on; pesannya berisi detailnya.

Lisensi

Add-on
Apache-2.0
Engine
Apache-2.0
Sopro, oleh Samuel Vitorino; ONNX Runtime berlisensi MIT
Model
Apache-2.0
Bobot Sopro V2 Turbo
Suara siap pakai
Public domain, CC-BY-4.0
Pembaca LibriVox; yang berbahasa Inggris melalui LibriTTS-R

Aman untuk pekerjaan komersial: add-on, Sopro, dan model Sopro V2 Turbo semuanya Apache-2.0. Suara siap pakainya adalah rekaman LibriVox, dalam domain publik; yang berbahasa Inggris berasal dari LibriTTS-R, di bawah CC-BY-4.0, dan add-on mencantumkan kredit untuk masing-masing. Dubbing yang Anda buat adalah milik Anda.

Versi

  • 26.10.1

    Voice-cloning text-to-speech for Subtitld with Sopro V2 Turbo: English, European Portuguese, French and German at 24 kHz, in the speaker's own voice cloned from the video, or in a preset voice.

    The archive holds the add-on, ONNX Runtime and the preset voice clips. The 336 MB model downloads on the first line, at a pinned revision, checked by sha256. It runs on the CPU, about twice as fast as real time.

    The add-on and the Sopro model are Apache-2.0. Each archive carries THIRD_PARTY_LICENSES/ with the licence of everything frozen into it, and the preset clips are credited in bin/_internal/sopro_addon/presets/README.md. The Linux archive carries libquadmath (LGPL-2.1, with numpy); its complete source is sopro-<version>-libquadmath-source.tar.gz in this release.

Pengaya Suara lainnya