最新消息

北京大学情感智能机器人实验室实习生招新!

当前,人工智能的浪潮迭起,各种各样的研究热点层出不穷。在人机交互中,想要真正读懂人类的意图,仅仅通过模式识别获取的信息往往并不足够,因此,人类情感的识别对于理解人类想要传达的信息是必需的。情感计算是一个多模态(视觉、语言、声音)、多领域(人工智能、机器人学、心理学)的复杂任务,而解决情感计算的难题将成为通往真正的通用人工智能路上必不可少的一环。情感计算会成为下一个人工智能的热点吗?情感计算需要哪些领域的交叉知识?

来LAIR一探究竟!情感智能机器人实验室 (Laboratory for Affective Intelligent Robotics, LAIR) 成立于2017年,以赋予机器人真正的智能和情感为发展目标,主任为王韬研究员。实验室本部在北京大学理科五号楼,分部在杭州-北京大学信息技术高等研究院。我们致力于使机器人能够像人一样理解(能够理解人类的情感)与表现(包括面部表情、头部动作等,并通过这些动作表达人类的情感),与人们进行含有情感的互动。我们希望使机器人能够识别人类情感,将自己的情感状态传达给人,不再让人感到冷冰冰;同时让机器人正面影响人的情绪,在家庭、安全、教育、健康等领域中发挥重要的作用。

#研究领域和成果#

一、情感检测技术

基于面部图像识别情感,初步提出基于面部解剖学特点的微表情动作时序分析理论。研究内容主要包括:a.粗粒度表情识别,即对心理学家Ekman定义的六种基本表情进行识别;b.细粒度表情分析,即对面部动作单元编码系统(FACS)中定义面部动作单元进行识别、强度估计等。

主要研究方向:Facial Action Unit Recognition、Semi-supervised Facial Action Unit Intensity Estimation、Semi-supervised Facial Expression Recognition、Open-set Facial Expression Recognition

 

 

 

 

 

 

 

二、实时无接触心率检测技术

结合计算机视觉和信号处理的方法从视频序列中提取rPPG(远程光电容积脉搏波)信号,从而实现非接触情况下对用户心率的分析。

研究内容包括:Accurate Remote HR measurement with Outlier Detection、Development of Real-Time Remote HR Measurement Application、Remote Vital Sign Monitoring Based on rPPG Signals

  

三、注意力识别技术

识别用户视线方向,分析视线的动态特征,建立用户注意力状态模型,并以此指导机器人做出相应动作。

研究内容包括:Gaze Estimation、Gaze-Based Intention Inference Method、HCI and HRI Based on Gaze Estimation

四、其他技术领域

实验室目前计划扩展新的技术领域,志在探索之前没有涉及过的情感计算相关模态和领域,期待充满创造力和执行力的你加入。

成果:LAIR实验室已在ACM MultimediaAAAIIROSIJCAIECCV等处发表优秀学术论文60余篇,多篇论文获得国际学术会议最佳论文奖。在情感智能机器人方面,申请发明专利37项(8项已授权)。

 

#实验室支持#

一、科研论文

如果你对科研感兴趣,希望认真钻研,发表科研成果,实验室有科研经验丰富的研究生学长学姐带你做科研,还有计算资源支持。讨论idea、做实验、写论文的整个流程都能得到充分的指导。

 

二、项目经验

如果你希望参与实际项目,将所学与应用结合起来,实验室也能满足你。实验室有和企业、国家相关部门合作的多个项目,正是缺人的时候,新人加入实验室将有机会深度参与项目,项目经验对于未来的申请和就业都能起到一定帮助。

 

三、保研支持

如果你希望推免保研,实验室每年都有学术硕士和直博的保研名额,也可以将你推荐到其他实验室保研。

 

四、出国支持

实验室也支持同学们研究生出国申请。曾经在实验室实习的本科生能够申请到美国等国家的硕士项目,曾经在实验室的研究生也能够申请到国外的博士项目继续深造。

 

五、就业支持

实验室往届毕业的学长学姐前往包括英特尔、腾讯、华为等在内的业界公司工作。如果你未来想就业,实验室能为你提供丰富的就业经验和包括实习机会在内的资源支持。

 

#基本要求#

1.对情感智能领域的研究有兴趣,有不断探索的动力

2.有较好的数学、英语、编程的基础

3.北京大学在读本科生

 

#报名方式#

发送简历和成绩单至:xuhaoyang310310@pku.edu.cnccstzzz@pku.edu.cn

邮件标题:“LAIR-2023-招新报名

邮件内容可以作简单的自我介绍,以及加入LAIR后计划(保研/出国/就业,以及感兴趣的研究方向等其他计划)。收到简历后,我们会和你进行进一步的联系和交流~