chatterbox finetune
Collection
I tested finetune's Chatterbox TTS model on some small languages for the open-source community.
•
4 items
•
Updated
•
2

"Salam, sən necəsən? Mən yaxşıyam, təşəkkür edirəm"
"Bu gün havalar çox isti və günəşlidir."
"Bakı Azərbaycanın paytaxtıdır və çox gözəldir."
"Mən azərbaycan dilini sevirəm və onu öyrənmək istəyirəm."
"Dünən dostumla birlikdə kinoya getdik və çox xoşbəxt idik."
First, download the file from huggingface and place it in the current directory.
The pypi version is delayed, so you must use the github version.
!git clone https://github.com/resemble-ai/chatterbox.git chatterbox_git
!pip install chatterbox-tts
from chatterbox_git.src.chatterbox import mtl_tts
import torchaudio as ta
from safetensors.torch import load_file as load_safetensors
device = "cpu" # or mps or cuda
multilingual_model = mtl_tts.ChatterboxMultilingualTTS.from_pretrained(device=device)
# ----
# Then download the file from huggingface and place it in the current directory.
# ----
t3_state = load_safetensors("t3_az.safetensors", device="cpu")
multilingual_model.t3.load_state_dict(t3_state)
multilingual_model.t3.to(device).eval()
azerbaijani_text = "Dünən dostumla birlikdə kinoya getdik və çox xoşbəxt idik"
wav_azerbaijani = multilingual_model.generate(azerbaijani_text)
ta.save("test-az.wav", wav_azerbaijani, multilingual_model.sr)
e-mail : cyprienoucortex@gmail.com
Base model
ResembleAI/chatterbox