会计系跨一级学科学术沙龙

主 题：别把大象关在冰箱里：文澜多模态预训练模型与应用新场景

主讲人: 宋睿华（中国人民大学高瓴人工智能学院长聘副教授）

协调人: 吴武清 徐图

时 间：2022-06-15 14:00

地 点：线上会议室

语 言：中文

讲座摘要:

认知科学的体验革命带来从语言理解意义的新观点：思考以及使用语言的能力是视觉、听觉、嗅觉、触觉和运动神经等多种模态与头脑合作的成果。人类的孩子是在多模态环境下学习语言，这也是目前AI欠缺的部分。在这次讲座中，我将介绍文澜在视觉和语言的关系上的探索与进展，包括利用互联网产生的6.5亿成对图片与文字，用自监督的任务完成的首个公开中文通用图文预训练模型文澜2.0，和利用千万视频-文本数据得到的视频文本预训练模型文澜3.0，以及超大规模预训练模型给跨模态检索、创作和交互带来的新机会。

主讲人简介:

宋睿华博士，中国人民大学高瓴人工智能学院长聘副教授，曾任微软亚洲研究院主管研究员和微软小冰首席科学家。她的算法完成了人类史上第一本人工智能创作的诗集《阳光失了玻璃窗》。她参与完成了首个公开的中文通用图文预训练模型——文澜，训练数据达到6.5亿图文对，并已经成功落地多个产品（如OPPO手机中的为视障人士读图功能）。宋睿华博士是具有国际影响力的人工智能科学家，发表学术论文90余篇，申请国际专利25项。最近的研究兴趣包括多模态理解、创作和交互。她是SIGIR 2021短文的PC Chair，EMNLP 2021的Senior Area Chair和Information Retrieval Journal的主编。

* 面向院内师生开放。