第一百零一章 帮我去上两节课?(2 / 5)
对,说到这个,还得多谢师弟你啊。”周俞咧嘴一笑,道:“我们用注意力机制搭配elmo尝试了几个简单的任务,无论速度上还是准确率上都没有因为有图像提取层而有所降低,算是把elmo这个模型完美地运用到了图像领域了。”
“目前的项目已经确定下来了,主攻短视频推荐,刘博和吴博也都没有任何异议,算是顺利进行了,估计要不了一个月,实验产品就能完成。”
周俞感激地看着苏飞,要不是有苏飞的提桉,就算那天能把项目确定下来,刘博和吴博这两个作为队伍主心骨的人也肯定有一人会存在异议,毕竟都觉得自己的方案更好,两人都争了半个多月了,周俞当时对这个状况也是头疼无比,还好他灵机一动把师弟拉了进来。
果然,苏神就是苏神,临场提出的一个新想法居然就有如此奇效。
“那就好,我还害怕我的想法没什么效果反而拖了你们的节奏。”
虽然嘴上这么说,苏飞心里却想着果然,这个结果没有出乎他的意料,这么一来自己的第三篇论文也算是有门路了。
他在transormer完稿的时候,就有考虑过下一篇论文,当时的想法是,既然elmo是把lstm这个基本模型单元做成了一个预训练模型,而且效果拔群,从而开辟了一个自然语言处理新时代,那是否能把transormer这个性能更好的模型单元也做成一个预训练模型呢?
虽然他当时有这个想法,但因为transormer的训练成本实在是太大了,在加入王正教授研究室前,他根本没门路去找能支撑这种大型训练任务的服务器,而现在,有王教授的算力支持,设备早已不是问题。
而他还给了科大讯飞一个初步的构想,现在看来效果也很不错,这就证明了把transormer做成一个预训练模型的想法是可靠的。
“嗯?怎么就你们两人?”
一个突然起来的声音让苏飞回过神来。
只见王正教授正拿着一叠教桉从门口走进来,脚步略微有些急促,两条浓眉皱成了一个川字。
“王教授。”
苏飞和周俞连忙打了声招呼。
“其他人呢?”
王正看着他们两人,皱着眉问道。
这空空荡荡的座位,显而易见,还没来啊。
苏飞默默吐槽。
“估计还在食堂……教授您怎么突然来了?”
周俞这话偏保守了,估计有
↑返回顶部↑