Bilgi Paketi / Ders Kataloğu
Konuşma Tanıma ve Sentezleme
Ders Kodu: MTK639
Ders Türü: Seçmeli
Ders Grubu: Doktora
Eğitim Dili: Türkçe
Staj Durumu: Yok
Teori: 3
Uyg.: 0
Kredi: 3
Laboratuvar: 0
AKTS: 8
Amaç

Bu derste öğrencilere konuşma tanıma ve sentezlemenin konuları anlatılıp uygulamalar geliştirilecektir. ilk olarak, ses üretimi ve akustik modeller teorisi sunulacaktır. Daha sonra, konuşma tanıma ve sentezleme ile ilgili algoritmalar anlatılacaktır.

Özet İçerik

Ses üretiminin teorisi, işitme, akustik ve fonetik. Sinyal gösterimi, vektör nicemleme. Ses spektrumu analizi (Fourier analizi, cepstral analiz, spektrogram okuma). Temel frekans analizi (F0 tahminleme, ses ve vurgu modelleri). Ses sentezleme. Lineer Kestirim (tüm-kutuplar modeli, LPC, PARCOR, LSP analizleri). Öğrenme algoritmaları ve uygulamaları (HMM, Viterbi algoritması, Bayes Teoremi). Ses kodlama (waveform kodlama, PCM, LPC). Ses kodlama (waveform kodlama, PCM, LPC). Saklı Markov Modeli(HMM), beklenti- maksimizasyon ve arama. Dil Modelleme. Grafiksel Modeller. Bölütlendirilmiş otomatik konuşma tanıma, Sonlu durum dönüştürücü.

Dersi Veren Öğretim Görevlisi/Görevlileri
Öğrenme Çıktıları
1.Konuşma tanıma ve sentezlemenin temel konularını anlama
2.Konuşma tanıma ve sentezlemedeki metotları kullanabilme
3.Konuşma tanıma ve sentezleme ile ilgili uygulamalar geliştirebilme
4.Öğrendiği matematiksel kavramlar arasındaki ilişkileri yorumlayabilme
5.Kurduğu matematiksel ilişkileri karşılaşabileceği problemleri çözmek için uygulayabilme
Ders Kitabı / Malzemesi / Önerilen Kaynaklar
1.Fundamentals of Speech Recognition, Rabiner and Juang, Prentice-Hall, 1993
2.An Introduction to Text-to-Speech Synthesis, Thierry Dutoit, Kluwer Academic Publishers, Dordrecht Hardbound, ISBN 0-7923-4498-7, 1997
Haftalık Ayrıntılı Ders İçeriği
1. Hafta - Teorik
Ses üretiminin teorisi, işitme, akustik ve fonetik
1. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
2. Hafta - Teorik
Sinyal gösterimi, vektör nicemleme
2. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
3. Hafta - Teorik
Ses spektrumu analizi (Fourier analizi, cepstral analiz, spektrogram okuma)
3. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
4. Hafta - Teorik
Temel frekans analizi (F0 tahminleme, ses ve vurgu modelleri)
4. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
5. Hafta - Teorik
Ses sentezleme
5. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
6. Hafta - Teorik
Lineer Kestirim (tüm-kutuplar modeli, LPC, PARCOR, LSP analizleri)
6. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
7. Hafta - Teorik
Öğrenme algoritmaları ve uygulamaları (HMM, Viterbi algoritması, Bayes Teoremi)
7. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
8. Hafta - Teorik
Ses kodlama (waveform kodlama, PCM, LPC)
8. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
9. Hafta - Teorik
Ses kodlama (waveform kodlama, PCM, LPC), Arasınav
9. Hafta - Ön Hazırlık
İşlenen tüm konular tekrarlanmalı
10. Hafta - Teorik
Ses kodlama (waveform kodlama, PCM, LPC)
11. Hafta - Teorik
Saklı Markov Modeli(HMM), beklenti- maksimizasyon ve arama
11. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
12. Hafta - Teorik
Dil Modelleme
12. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
13. Hafta - Teorik
Grafiksel Modeller
13. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
14. Hafta - Teorik
Bölütlendirilmiş otomatik konuşma tanıma, Sonlu durum dönüştürücü
14. Hafta - Ön Hazırlık
Ders kitabındaki ilgili konular okunmalı
15. Hafta - Ön Hazırlık
İşlenen tüm konular tekrarlanmalı
15. Hafta - Dönem Sonu Sınavı (Final)
Final
Değerlendirme
Değerlendirme TürüAdetYüzde
Ödev1%5
Dönem Ödevi1%5
Ara Sınav (Vize)1%20
Dönem Sonu Sınavı (Final)1%70
İş Yükü Hesaplaması
EtkinlikSayısıÖn HazırlıkSüreToplam Iş Yükü (Saat)
Kuramsal Ders140342
Ödev1066
Dönem Ödevi1066
Bireysel Çalışma140570
Ara Sınav130232
Dönem Sonu Sınavı142244
TOPLAM İŞ YÜKÜ (Saat)200
Program ve Öğrenme Çıktıları İlişkisi
PÇ-1
PÇ-2
PÇ-3
PÇ-4
PÇ-5
PÇ-6
PÇ-7
PÇ-8
PÇ-9
PÇ-10
PÇ-11
PÇ-12
PÇ-13
PÇ-14
PÇ-15
OÇ-1
4
3
4
4
4
4
4
4
4
2
2
OÇ-2
4
5
4
5
4
5
3
4
4
4
3
2
3
OÇ-3
4
5
5
5
5
5
4
4
5
4
4
4
OÇ-4
4
5
5
5
5
5
4
4
5
4
3
3
OÇ-5
4
5
5
4
5
5
4
4
5
4
3
3
4
Adnan Menderes Üniversitesi - Bilgi Paketi / Ders Kataloğu
2026