sherpa-onnx

Ne işe yarar?

Sherpa-onnx, yeni nesil Kaldi ve ONNX Runtime çalışma ortamı üzerinde internet bağlantısına ihtiyaç duymadan ses işleyen bir motordur. Konuşmayı metne çevirme, metinden ses üretme, konuşmacı ayrıştırma ve ses etkinliği algılama gibi birçok işlevi yürütür. C++, Python, JavaScript ve Rust dahil 12 programlama dilinin yanı sıra Flutter ve Tauri çerçevelerini destekler. Sunucuların yanı sıra Raspberry Pi, Android, iOS ve çeşitli sinirsel işlem birimi (NPU) donanımlarında çalışabilir.

Neler için kullanılabilir?

• İnternet bağlantısı bulunmayan mobil uygulamalarda çevrimdışı sesli komut sistemi geliştirmek
• Gömülü sistemler ve Raspberry Pi üzerinde gerçek zamanlı ses tanıma çalıştırmak
• Toplantı kayıtlarında farklı konuşmacıları otomatik olarak ayrıştırmak ve metne dökmek

Nasıl kullanılır?

1. Hedef işletim sisteminize ve kullanacağınız programlama diline uygun kütüphane bağlayıcısını seçin.
2. Gerçekleştireceğiniz görev için eğitilmiş ONNX model dosyasını indirin.
3. Kütüphaneyi projenize dahil ederek çevrimdışı ses tanıma veya sentezleme işlevlerini çalıştırın.

Adımlar deponun README'sinden özetlendi; güncel kurulum için deponun kendi sayfasına bakın.

Kimler için?

Gömülü cihazlarda, mobilde veya yerel sunucularda internetsiz ses çözümleri kurmak isteyen geliştiriciler.

Aynı kategoriden

• Whisper Konuşmaları metne dönüştüren ve çeviri yapabilen genel amaçlı yapay zekâ modeli.
• VoiceStudio Kendi bilgisayarınızda çalışan ses klonlama, dublaj ve konuşma tanıma aracı.
• GPT-SoVITS (63K) Kısa bir ses kaydıyla ses klonlama ve metinden konuşma üretimi sağlayan web arayüzü.
• voicebox (57,7K) Yerel olarak çalışan açık kaynaklı yapay zekâ ses stüdyosu ve dikte aracı.
• whisper.cpp OpenAI Whisper modelinin C ve C++ ile yazılmış yüksek performanslı yerel sürümüdür.
• VoxCPM (39K) 30 dilde doğal seslendirme, ses tasarımı ve klonlama sunan açık kaynaklı TTS modeli.