Gerçek zamanlı ses tabanlı duygu tanıma sistemi.
- Whisper tabanlı ses embedding çıkarımı
- Transformer tabanlı duygu sınıflandırma
- WebRTC VAD ile gerçek zamanlı konuşma tespiti
- Transition matrix ve Markov modelleri ile duygu tahminini geliştirme
- Offline ve online mod desteği
data/- Ham ve ön işlenmiş verimodels/- Eğitilmiş modellersrc/- Kaynak kodlartrain_transformer.py- Transformer modeli eğitimireal_time_emotion.py- Canlı duygu tahmini uygulamasıvad_utils.py- VAD yardımcı sınıfıtransition_matrix.py- Geçiş matrisi hesaplamalarıwhisper_utils.py- Whisper embedding çıkarma yardımcılarırun_app- Proje başlatma scripti
Python 3.8+ ve gerekli kütüphaneler:
pip install -r requirements.txt