Index

■ Agenda / Table of Contents

Lecture 1: Introduction (10/6) ... [introduction] [handout]

• 音声インタフェースの概要
• パターン認識・機械学習の基礎
• 統計的音声認識の概要 P(W|x_i)
• 音声・音響信号の特徴 → Labo A-1

Lecture 2: Fundamentals of speech processing (10/13) ... [handout]

• 音声の入力と分析
• 音声の距離 → 計算クイズ１
• 音声認識のための特徴量抽出
• 実習0: 準備
• 実習1: 音声ファイルの扱い方(2016年度と共通) → Labo A-2

Lecture 3: Discrete Hidden Markov model (HMM) (10/20) ... [handout]

• DTW/DPマッチングによる時系列信号処理
• 音響モデルの基礎（離散HMM/Viterbi） → 計算クイズ 2
• 実習2: フレーム分析の基礎(2016年度と共通) → Labo B-1 / Labo BX

Lecture 4: Training discrete HMM (Baum-Welch algorithm) (10/27) ... [handout]

• 統計的な確率の最尤推定
• 音響モデルの基礎（離散HMM/Baum-Welch）→ 計算クイズ 3
• 実習3: ケプストラム分析(2016年度と共通)→ Labo B-2

Lecture 5: Gaussian Mixture Models and Continuous HMM (11/1 Wed.) ... [handout]

• 音響モデルの基礎（GMMの概要）
• 音響モデルの基礎（GMMのパラメータ推定）
• 音響モデルの基礎（GMMと数値計算）
• 音響モデルの基礎（連続HMM）
• 実習4: GMMのEM学習と尤度計算 (2016年度と共通)→ Labo C / Labo CX
  • histogramコマンドについて

Lecture 6: Statistical ASR: Acoustic Models (11/10) ... [handout]

• 統計的音声認識の概要 (1)
  • 音響モデルの実際（サブワード音響モデル）
  • 音響モデルの実際（状態共有、分布共有）
  • 音響モデルの実際（話者適応・環境適応）
• 実習5: 単語HMM音響モデルの学習と認識 (2016年度と共通) → Labo D-1

Lecture 7: Statistical ASR: Language Models (11/17) ... [handout]

• 統計的音声認識の概要 (2)
• 言語モデル（文脈自由文法）
• 言語モデル（統計的言語モデル）
• 実習6: サブワードHMM音響モデルの学習 [github] → Labo D-2

Lecture 8: Design for Speech Recognition Interfaces (11/24)

• 部屋変更：303室
• Labo Z/ZX に向けたアイデアソン or ブレインストーミング
• 「ロボットとの対話を想定した音声インタフェース」
  • 成果物

Lecture 9: Speech Recognition Algorithms (12/8) ... [handout]

• 音声認識アルゴリズム（単語音声認識）
• 音声認識アルゴリズム（連続音声認識）
  • 実習7a: 文音声認識 [github] → Labo D-3
• 実習7b: HMM音響モデルの適応* [github]→ Labo D-4*

Lecture 10: Practical algorithms for ASR (12/15) ... [handout]

• 音声認識アルゴリズム（Julius）
  • 実習8a: 音声認識エンジン Julius のための統計的言語モデルの作成 [github]
  • → Labo E-1
  • 実習8b: 新聞記事言語モデルの学習と評価 [github] → Labo EX-1*

Lecture 11: Spoken Dialog Systems (SDSs) (12/22) ... [handout]

• 音声対話システムの概要
• 音声対話システム：対話処理
• 実習9: 音声認識エンジン Julius を用いた大語彙連続音声認識と評価 [github] → Labo E-2
  • 実習10: 音声認識エンジン Julius のチューニング [github]
  • → Labo E-3, Labo EX-2*

Lecture 12: Speech Generation and Responses (1/5) ... [handout]

• 部屋変更（4号館303室）
• 音声対話システム：言語理解
  • 音声対話システム：応答生成
• RAPIRO実習 (1) 開発環境構築と対話処理の基礎

Lecture 13: Practical use of SDSs (1) (1/19) ... [handout]

• 部屋変更（4号館303室）
• 音声対話システムの実際 (1)
• RAPIRO実習 (2) ロボット実験系の構築

Lecture 14: Practical use of SDSs (2) (1/26) ... [handout]

• 部屋変更（4号館303室）
• 音声対話システムの実際 (2)
• RAPIRO実習 (3) Raspberry Pi実験系の構築

Lecture 15: Practical use of SDSs (3) (2/2) ... [handout]

• 部屋変更（4号館303室）
• 音声対話システムの実際 (3)
• RAPIRO実習 (4) 音声対話ロボットの構築