おめでとうございます！

Kerasで学ぶ言語モデリングのためのRecurrent Neural Networks (RNNs)

David Cecchini

Data Scientist

まとめ

• 言語タスクの導入:
  • 感情分類
  • 多クラス分類
  • テキスト生成
  • ニューラル機械翻訳
• シーケンス・ツー・シーケンスモデル
• Kerasでの実装

RNNの落とし穴とセルの種類

• 勾配消失・爆発問題
• GRU と LSTM セル
• 単語ベクトルと Embedding 層
• 高精度な感情分析

多クラス分類

• データ前処理
• 転移学習
• Keras モデル
• モデル性能

テキスト生成とNMT

• テキスト生成
  • 文字をトークンに
  • データ前処理
  • シェルドン風の文を生成
• ニューラル機械翻訳
  • 単語をトークンに
  • データ前処理: エンコーダーとデコーダー
  • ポルトガル語→英語に翻訳

おめでとうございます!!!

Kerasで学ぶ言語モデリングのためのRecurrent Neural Networks (RNNs)