认知计算创新实验室2020秋季学期讨论班(6)

一、 主题：语言模型和RNN

主讲人：吴佳琪

摘要：本次课程的主题为语言模型和RNN，语言模型能够在给定已有词的情况下预测可能出现的下一个词，即对自然语言的概率分布进行建模。传统的n-gram和神经语言模型具有诸多弊端，本次讨论我们通过RNN的介绍引出序列语言模型，详述现在主流语言模型的建模方式。