掌上青岛/青网讯 9月9日,2020年阿里巴巴达摩院青橙奖获奖名单公布,10位青年科学家经过层层筛选获得达摩院的1000万元奖金。35岁的山东大学教授聂礼强,成为了今年“硬核10人”中的一员,主办方给他的获奖理由是:“赋予对话机器人对多模态场景感知、理解与推理的能力,从而让人机交互更自然。聂礼强在发表获奖感言时表示:“希望对话机器人能够真正的会看、会听、会想、会说,从而真正的逼近自然人。”
山东大学教授聂礼强
据了解,“达摩院青橙奖”(DAMO Academy Young Fellow) 是由阿里巴巴达摩院主办的公益性评选活动,旨在发掘和支持对科技进步有关键推动作用的中国青年学者,目标对象是从事基础科学、应用技术研究的优秀青年工作者。阿里巴巴达摩院为每位获奖人发放100万人民币奖金,并提供开放的数据资源和应用场景等全方位支持,助力其勇攀科学技术之巅。
“我的博士跑完半马才能毕业”
和很多人印象中的“教授”形象不同,来自山东大学的聂礼强,爱爬山、钓鱼、跑步,被学生们称作“铁血教授”。聂礼强曾在新加坡国立大学读博士,毕业后又从事过助理研究员、研究员,16年回到山东大学任教。“当时还算比较年轻的老师,后来被后浪拍在了沙滩上。我很骄傲的是,后浪是我自己回国培养的第一个博士,现在她是山东省最年轻的一位正教授。”18年初,聂礼强担任山东省人工智能研究院院长。
回国后,聂礼强组建了山东大学的智能媒体研究中心。中心现在有正教授一名、副教授两名、助理教授两名、博士后两名以及多名全职工程师和科研助理。整个团队年轻有激情,除了老师还有博士硕士以及高年级本科生大约100余人。
山东大学教授聂礼强
“我们的博士的毕业条件是,3篇CCF A一作长文+半程马拉松+1年海外交流。学生选我博士的时候,我就会讲好毕业条件,到现在为止还没有发现不愿意的。如果马拉松跑不下来,我就带着他们一起。”在聂礼强看来,跑马拉松是有师承的,他的导师Tat-Seng Chua教授也喜欢跑步,两人经常一起跑。“我希望我的学生不要只是书呆子,不要是光会写论文的paper machine,你还得成为家庭和社会需要的人。你要用跑步锻炼韧性,身体原因实在不行的,可以用15分钟平板支撑替代。你得学会做饭、开车,我也鼓励学生谈恋爱和结婚。”
10余年聚焦多模态的融合推理以及检索
过去十多年,聂礼强的研究主要聚焦在多模态的融合推理以及检索上。他总结了这个领域的三大挑战,并针对此聚焦三个研究内容,团队共发表CCF A类会议或IEEE/ACM期刊百余篇,Google 学术引用7700余次,今年上半年引用1700次。单篇最高引用1400多次。聂礼强参与创办了齐鲁智能媒体论坛,已经成功举办五届,惠及齐鲁学子大概2000余人次。
聂礼强的代表性成果是多模态对话系统,他从2009年开始做这个方向的研究,给定一个自然语言描述的问题,让机器人用相关的文本、音频、图像、视频等单模态或多模态组合的素材来呈现答案。“多模态对话还有一个至亲,就是15年前后开始兴起的视觉问答,它是给定一张或多张图片以及与图片相关的问题,让机器人用文本来回答问题。多媒体问答的答案是多模态的,而视觉问答的问题是多模态的。”
山东大学教授聂礼强
“不管是多媒体问答还是视觉问答,都是单轮对话的,机器没有记忆功能,没有联系上下文来回答问题,这不符合人类的习惯。”聂礼强希望能够将多媒体问答和视觉问答捏合,给机器人安装一个大脑,让机器人在答复人类问题的时候,能够考虑上下文,并以多模态的形式呈现,这就是多模态对话系统。对于未来的工作,聂礼强期望能够赋予对话机器人对多模态场景感知、理解与推理的能力,从而让人机交互更自然。
学术道路和工业界道路,怎么选?
在聂礼强看来,学术的道路和工业界的道路,都能达到人们说的人生成功的巅峰,只不过是不一样的生活状态。“工业界待遇可能会高一些,做的东西能被千家万户使用,会让你有自豪感。而在高校,教书育人、桃李满天下,培养的学生在分布在世界各个角落,这是另一种愉悦。”
“关于钱多钱少的问题,当然钱多可能生活会自在一些,但是现在高校教师的收入也在逐渐提高,比如说我们有很好的福利房、解决子女教育等等,我的生活已经足够好了,你每年再多给我30万20万,对我的生活的质量没有更多的改变。”聂礼强表示,自己乐于现在的处境,更多的还是想做自己想做的事情。“在学术界我可以有很多自由时间,我可以做我自己想做的事情。当然我们研究的东西做得很好,我们也可以产业化、可以落地。如果再给我一个机会,我还是会教书育人,培养学生,这就是我的初衷。”青报全媒体记者 赵文源
已有0人发表了评论