语义计算实验室2021春季学期讨论班(4)

一、 主题:文本改写方法前沿进展

主讲人:刘天元

摘要:随着对自然语言处理方法的鲁棒性和可解释性的重视,文本改写(Paraphrasing)任务成为一个重要的支撑任务。本周介绍多个前沿的文本改写方法,以了解该任务的前沿进展、存在的问题以及可能的方向。

时间和地点:4月10日9:00-10:00(星期六上午9点-10点),软件学院办公楼201会议室


二、 主题:基于BERT预训练模型的快速准确多句评分模型

主讲人:杨涛

摘要:对于成对文本相似性的比较,有两种较为常见的方法。一种是在句子对上进行自注意力计算的Cross-encoder,另一种是分别编码句子对中的两个句子再交互的Bi-encoder。前者效果要好于后者,但是面对较多候选句时,Cross-encoder需要对每个候选句计算一次前向传播,极为耗时。本文提出一种Poly-encoder方法,相比于Cross-encoder,能够大大提升模型在实际使用中的速度,且同时效果好于Bi-encoder。

时间和地点:4月10日10:00-11:00(星期六上午10点-11点),软件学院办公楼201会议室