|
［黒橋 禎夫教授 研究室］ |
|---|
自然言語処理に関して、その歴史から最新の研究動向までを概観するとともに、基本的な言語解析システムおよび感情分析・翻訳・要約などの応用システムについて具体的に実装しながら理解を深めます。
京都大学大学院 情報学研究科 知能情報学専攻 教授
黒橋 禎夫
黒橋 禎夫
京都大学大学院 情報学研究科 知能情報学専攻 講師
村脇 有吾
村脇 有吾
自然言語処理に関して、その歴史から最新の研究動向までを概観するとともに、基本的な言語解析システムおよび感情分析・翻訳・要約などの応用システムについて具体的に実装しながら理解を深めます。
京都大学大学院 情報学研究科 知能情報学専攻 教授
黒橋 禎夫
黒橋 禎夫
京都大学大学院 情報学研究科 知能情報学専攻 講師
村脇 有吾
| 前提知識 | Pythonプログラミングに関する基礎知識（参考図書:Pythonチュートリアル第3版（オライリー））、ベクトル・行列・確率に関する基礎知識 |
|---|
10月28日（木）
| 9:30～ |  |
自然言語処理入門 I 自然言語処理の歴史の俯瞰、語の意味、言語モデル、系列解析 |
|---|---|---|
| 11:00～ | |
ニューラルネット入門 I ニュートラルネットの基礎、逆誤差伝播 |
| 12:30～ | 休 憩 | |
| 13:30～ |  |
ニューラルネット実装 深層学習フレームワークPyTorchによる実装 |
| 15:00～ | |
ニューラルネット入門 II ニューラルネットによる記号処理、RNN、LSTM |
| 16:30～ | |
リカレントニューラルネットの実装 PyTorchによるRNN実装 |
10月29日（金）
| 9:30～ | |
自然言語処理入門 II 構文・格・文脈解析、情報検索と質問応答の基礎 |
|---|---|---|
| 11:00～ | |
自然言語解析ツール I テキストの抽出、クリーニング・形態素解析 |
| 12:30～ | 休 憩 | |
| 13:30～ | |
自然言語解析ツール II 構文解析システム BERTKNP |
| 15:00～ | |
自然言語解析ツール III・クラウドソーシング イベント抽出システムEventGraph、情報分析・要約、クラウドソーシングによるデータ作成 |
| 16:30～ | |
BERT入門 I BERTの基礎、事前学習 |
11月4日（木）
| 9:30～ | |
BERT入門 II Transformer、attention、サブワード |
|---|---|---|
| 11:00～ | |
英語BERT 英語BERTモデルの利用、fine-tuning |
| 12:30～ | 休 憩 | |
| 13:30～ | |
日本語BERT 日本語BERTモデルのpre-training |
| 15:00～ |
日本語BERTモデルの利用、fine-tuning |
|
| 16:30～ | |
BERT応用・最近の話題 BERTの発展的モデル、最新の研究動向、医療テキスト解析 |
11月5日（金）
| 9:30～ | |
総復習：感情極性予測 自然言語解析ツール、ニューラルネットとクラウドソーシングの統合 |
|---|---|---|
| 11:00～ | |
自然言語処理入門 III 機械翻訳、対話システム、Seq2seqモデル |
| 12:30～ | 休 憩 | |
| 13:30～ | |
Seq2seqモデルの学習 Seq2seqモデルの機械翻訳への適用 |
| 15:00～ | |
Seq2seqの事前学習モデル Seq2seqの事前学習モデル、入力誤り訂正、対話システム |
| 16:30～ | |
マルチモーダ処理・まとめ image2txt、ビジュアルグラウンディング |
| 18:00～ | アフターセッション | |
