通知公告
例会讲座(第50讲): Attention机制的基本介绍
Notice Type:中心通知 Author:熊九龄 Notice Date: 05/07/2019 16:56:13 16:56:13 Source:内部管理 Valid Days:永久有效

主题:Attention机制的基本介绍

主讲人:肖崇中

内容简介:近年来,Attention机制被广泛应用到基于深度学习的自然语言处理(NLP)各个任务中,2017年6月google机器翻译团队发表《Attention is all you need》,自注意力(self-attention)机制开始成为神经网络attention的研究热点,在各个任务上也取得了不错的效果。本次讲座主要介绍Attention机制的基本原理,并简单介绍transformer、BERT等模型的基本结构。


时间:2019年7月7日19:30
地点:南一楼706室