音声認識と理解（Speech Recognition）[3D14]

＜授業のねらい＞

スマートフォンやパソコン上で利用可能になり始めた音声認識と理解の技術を，
音声言語の科学と情報学の観点から理解し，
音声認識と理解の技術を実際の問題解決に応用するための基礎力を習得する．

＜受講にあたっての前提条件＞

特に前提はないが，
確率論，統計学，情報理論，ディジタル信号処理，音情報処理などを受講していると，
本科目をより詳しく理解できる．

＜具体的な到達目標＞

・音声認識と理解の技術の概要の解説ができる
・パターン認識の中での音声認識の位置づけを解説できる．
・多くの音声認識結果の候補中から最適な結果を選ぶ際に用いるスコアの計算ができる．
・音声認識技術を活用したアプリケーションの開発を開始するための基本を身につけることができる．

＜授業計画及び準備学習＞

＜すべての回に共通する準備学習＞
・予習
　　下記で指定する教科書の各回講義に該当する箇所を講義時間の前に読む．
　　講義のキーワードについて教科書や参考書などを活用して調べておく．
　　前回までの講義の内容を復習しておく．
・復習
　　講義で解説された，概念，方式，用語を自分の言葉で説明でき，
　　各種の計算をできるように学習すること．
　　可能であれば，自分のパソコン，あるいは，計算機室の計算機上で，
　　実際に音声を扱ってみること（有用なソフトウエアの紹介は講義内で行う）．

＜授業計画＞
・下記の計画で講義を行なう．
・計算方法や手順の理解が必要となる回では演習とその解説も行なう．

１．本講義の概要
　本講義の到達目標と１５回の講義の概要をシラバスを参照しながら解説する．
　音声認識技術を構成する主要なモジュールである，
　　音声分析による特徴量抽出，　　音響モデル，　言語モデル，
　　発音辞書，　　探索，
　などの概要を解説する．各モジュールの詳しい解説は２回目以後の講義で行なう．

２〜３．パターン認識の中での音声認識
　パターン認識の概念と，パターン認識の１つである音声認識の概説を行なう．

　キーワード：ベイズ識別，パターンマッチング，ＤＰマッチング，
　　　　　　　生成モデル，識別モデル，音声認識
　　　　　　　特徴量抽出，音響モデル，言語モデル，探索，発音辞書

４．音声からの特徴量抽出
　音声認識技術を構成する１つのモジュールである音声分析，
　そこで抽出する特徴量について解説する．　

　キーワード：標本化，量子化，音声分析，スペクトラム，ケプストラム，MFCC，音素，
　　　　　　　Praat，Wavesurfer

５〜６．音響モデル
　音のモデルである音響モデルと特徴量との関係について解説する．

　キーワード：音響モデル，Gaussian Mixture Model， Hidden Markov Model(HMM)，
　　　　　　　Forward-Backwardアルゴリズム，Viterbiアルゴリズム

７〜８．発音辞書と言語モデル
　音と単語とを結びつける発音辞書，
　単語間のつながりをモデル化した言語モデルについて解説する．

　キーワード：発音辞書，木構造辞書，重み付き有限状態トランスデューサ，
　　　　　　　統計的（確率的）言語モデル，N-gram，パープレキシティ

９．探索と最新の話題
　認識結果の候補となる単語がたくさん上がってくる中で，
　最適な結果を探す探索の技術を解説する．
　さらに，最新の音声認識技術についても触れる．

　キーワード：音声認識の探索，ビームサーチ，ビタービ探索，Deep Neural Network，ＷＦＳＴ

１０〜１１．音声理解
　音声認識によって，音を文字列に変えることができる．
　得られた文字列からその伝えたい内容を取り出す理解技術を解説する．

　キーワード：発話行為
　事前検討課題：発話の話し手と聞き手との間で対話が行われると，何が起こるのかを考えること

１２．応答手段としての音声合成
　音声を理解をした結果を示すには，計算機から何らかの反応を返すことが必要である．
　その一つとしての音声合成の技術を解説する．
　音声を出力する側から考えることで，音声認識の技術への見方を広げることをねらいとする．

　キーワード：アクセント，イントネーション

１３〜１４．使ってみよう！作ってみよう！
　総復習，および，音声認識の利用法とそれを使ったアプリケーション開発の基本を解説する．

　キーワード：ＨＴＫ，Ｊｕｌｉｕｓ，ＷＥＢプログラミング

１５．学習成果の確認

＜成績評価方法＞

14回の講義のうち10回以上出席した者に15回目の期末定期試験の受験資格を認める．
１００点を満点とする期末定期試験を実施し，その得点が60点以上の者を合格とする．

＜教科書＞

荒木雅弘著，イラストで学ぶ音声認識，講談社（2015）．

紙製の書籍のみ期末定期試験への持ち込みを許可する．
（期末定期試験時は電子書籍と電話やPC等の通信機能を有する機器の持ち込みは許可しない．）

＜参考書＞

指定参考書なし

＜オフィスアワー＞

質問は講義時間中または講義終了後に受け付ける．

＜学生へのメッセージ＞

・今年度からは教科書を利用するので，事前にしっかりと読んでから，出席してほしい．
・音声認識と理解についての技術基礎を講義する．
　将来，音声言語処理を専門にしたい学生には基礎となる．
　別の分野を専門にしようとする学生は，時間変化するパターンの認識技術として，
　将来の自分の専門にどう活かすかを考えるとよいだろう．
・実社会での活用事例も紹介するが，これは本講義の主目的ではないので，
　フリーソフトの音声認識器を活用しながら，あるいは，世の中のサービス事例を利用しながら，
　自分で考えてほしい．
・積極的に参加することを期待します．