WhisperSpeech

WhisperSpeech, OpenAI Whisper modelinin tersine çevrilmesiyle oluşturulmuş açık kaynaklı bir metin-ses (TTS) sistemidir. Mimari olarak iki aşamalı token tabanlı bir boru hattı izler; transkripsiyon için Whisper'ı, dalga biçimi tokenizasyonu için EnCodec'i ve yüksek sadakatli ses için Vocos'u kullanır. Apache-2.0 ve MIT lisanslarıyla sunulan modeller, lisanslı verilerle eğitilmiştir ve RTX 4090 üzerinde gerçek zamanlı hızın çok üzerine çıkabilen optimizasyonlar barındırır.

WH

collabora · Ses & Metinden Sese (TTS)

YILDIZ4
ÇATAL271
COMMIT264
KATKICI9
SÜRÜM—
GÜNCELLEME10 ay önce
JupyterWhisper-BasedAkışSes TokenizerMIT

Bu kategorideki yaygın ticari ürünler: ElevenLabs, Amazon Polly, Google Cloud Text-to-Speech

Ne yapar?
  • Tek bir cümle içinde farklı diller arasında akıcı geçişler yaparsın
  • Tek tıklamayla mevcut örnekler üzerinden ses kopyalama (voice-cloning) işlemi gerçekleştirirsin
  • Colab ortamını kullanarak veya yerel bilgisayarında ön eğitilmiş modellerle hızlıca çalıştırırsın
Kullanıcı yorumları
  • ↑ OlumluHacker News

    WhisperSpeech – Bir open source metin-konuşma sistemi Whisper ters tarafından inşa

    “Evet, teşekkürler. Gelecekte bunu okuyabilecek herkes için bunu (bunu en kısa zamanda belgemize de koyacağım) netleştirmeye çalışmak isterim: modelimiz Fısıltı'nın bir türevi değildir, ancak veri ön işlememizde transkriptleri (ve kodlayıcı çıktılarını) kullanırız. Ben...”

Web Sitesi GitHub

Notum

Alternatif sayfaları

Aynı kategoride: Ses & Metinden Sese (TTS)