大模型时代的计算机视觉!CVPR 2024线上分享会全日程公布

自从 OpenAI 发布 ChatGPT 以来,整个技术社区对大模型、AIGC 的关注越来越高。大模型时代,计算机视觉(CV)领域的热点话题也在不断的发生着变化。面对应接不暇的研究,我们如何才能以最快的时间了解 AI 领域的最新科研成果与发展趋势?参加顶会论文分享会就是一个不错的选择。作为计算机视觉领域的顶级会议,CVPR 每年都会吸引大量研究机构和高校参会。据统计,今年共提交了 11532 份论文,2719 篇被接收,录用率为 23.6%。为了给国内 CV 社区从业者搭建一个自由轻松的学术交流平台,机器之心计划于

自从 OpenAI 发布 ChatGPT 以来,整个技术社区对大模型、AIGC 的关注越来越高。

大模型时代,计算机视觉(CV)领域的热点话题也在不断的发生着变化。

面对应接不暇的研究,我们如何才能以最快的时间了解 AI 领域的最新科研成果与发展趋势?参加顶会论文分享会就是一个不错的选择。

作为计算机视觉领域的顶级会议,CVPR 每年都会吸引大量研究机构和高校参会。据统计,今年共提交了 11532 份论文,2719 篇被接收,录用率为 23.6%。

为了给国内 CV 社区从业者搭建一个自由轻松的学术交流平台,机器之心计划于 2024 年 6 月 1 日 9:00-17:00 组织「CVPR 2024 线上论文分享会」,广邀 AI 社区成员参与学习。

本次论文分享会设置 Keynote、 论文分享环节,就业内关注的 CV 热门主题邀请顶级专家、论文作者与观众做学术交流。

今天,分享会全日程、Keynote 分享嘉宾及演讲主题正式公布。

图片

Keynote 嘉宾及演讲主题

上午 Keynote 1:金小刚 数字人建模动画关键技术

分享人介绍:金小刚,浙江大学计算机科学与技术学院教授,博士生导师。浙江大学 - 腾讯游戏智能图形创新技术联合实验室主任,浙江省虚拟现实产业联盟理事长。第九届霍英东青年教师基金、浙江省杰出青年基金获得者,入选教育部新世纪优秀人才支持计划。在 ACM TOG (Proc. of Siggraph) 等国际重要学术刊物上发表论文 180 多篇。获省部级一等奖一次,二等奖二次。

分享摘要:数字人是近年来的研究热点,可广泛用于计算机动画、计算机游戏、虚拟主播、虚拟客服等领域。报告将介绍本人所在研究小组在视频肖像的胖瘦调整、肖像双下巴去除、肖像头发去除、用于睫毛抠图的数据集与基线方法、基于扩散模型的文生三维肖像、高精度人体运动神经求解器、实时人体运动补间等方面的一些最新研究进展。

上午 Keynote 2:朱俊彦 Enabling Collaboration between Creators and Generative Models

分享人介绍:Jun-Yan Zhu is an Assistant Professor at CMU’s School of Computer Science. Prior to joining CMU, he was a Research Scientist at Adobe Research and a postdoc at MIT CSAIL. He obtained his Ph.D. from UC Berkeley and B.E. from Tsinghua University. He studies computer vision, computer graphics, and computational photography. His current research focuses on generative models for visual storytelling. He has received the Packard Fellowship, the NSF CAREER Award, the ACM SIGGRAPH Outstanding Doctoral Dissertation Award, and the UC Berkeley EECS David J. Sakrison Memorial Prize for outstanding doctoral research, among other awards.

分享摘要:Large-scale generative visual models, such as DALL・E and Stable Diffusion, have made content creation as little effort as writing a short text description. Meanwhile, these models also spark concerns among artists, designers, and photographers about job security and proper credit for their contributions to the training data. This leads to many questions: Will generative models make creators’ jobs obsolete? Should creators stop publicly sharing their work? Should we ban generative models altogether?

In this talk, I argue that human creators and generative models can coexist. To achieve it, we need to involve creators in the loop of both model inference and model training while crediting their efforts for their involvement. I will first explore our recent efforts in model customization, which allows creators to freely control the model’s behavior by adding, altering, or removing concepts and rules. I will demonstrate several applications, including customizing models with multiple personal concepts and removing copyrighted content. I will then discuss our data attribution algorithm for assessing the influence of each training image for a generated sample. Collectively, we aim to allow creators to leverage the models while retaining control over the creation process and data ownership. 

下午 Keynote 1:芦清林 腾讯混元文生图的算法核心 ——DIT 架构解读

分享人介绍:芦清林博士,带领多媒体创作团队,负责腾讯混元文生图模型及广告创意 AI 算法研发工作。在计算机视觉,机器学习,AIGC 方面有丰富的研究经历,曾发表 10 余篇会议和期刊论文,数十项专利,支撑腾讯广告业务发展。

分享摘要:

1、趋势:视觉生成技术的新篇章 ——DIT

2、混元 DIT 三大升级

3、效果展示 & 定量分析 ——demo

4、全面开源

下午 Keynote 2:盛律 Multimodal Large Language Models Meets Embodied Agents

分享人介绍:盛律,北京航空航天大学 “卓越百人” 副教授,入选北航青年拔尖计划。研究方向是三维视觉、多模态大模型和具身智能。在 TPAMI/IJCV 以及 CVPR/ICCV/ECCV 等重要国际期刊和会议发表论文 50 余篇,含多篇会议口头报告或亮点论文。谷歌引用超 4900 次。担任 ACM Computer Surveys 副编,CVPR 2024/ECCV 2024/ACM MM 2024 领域主席等。主持或参与多项国家自然科学基金、科技部重点研发计划等项目。

分享摘要:在多模态大模型和生成模型的加持下,围绕具身智能体的研究工作从传统的抓取、导航等任务,扩展到在复杂多模态环境中通用交互任务的解决。在本次报告中,讲者将介绍面向具身智能体的多模态大模型及其多模态多任务高效微调方法,并以此为基础探讨在以 Minecraft 为代表的仿真环境中实现具身智能体的设计思路,和在真实环境下实现具身机器人泛化操作的有益尝试。最后,报告将展望端到端具身大模型,讨论其中的机会和挑战。

参与方式

此次线上论文分享会将在机器之心以及黄大年茶思屋两个平台进行直播,欢迎大家关注、预约。大模型时代的计算机视觉!CVPR 2024线上分享会全日程公布

图片

相关资讯

报名通道开启!CVPR 2021 NAS国际竞赛邀全球开发者迎接挑战

CVPR作为计算机视觉领域和模式识别领域的世界级学术顶会,不仅是展示前沿科技成果的学术会议,也是探索学术应用的一大平台。今年,百度联合澳大利亚悉尼科技大学和美国北卡罗来纳大学举办CVPR 2021 NAS workshop,同时于3月1日正式启动CVPR 2021 NAS国际竞赛,面向全球开发者开放报名通道。人脸识别、语音识别、机器翻译……每一项人工智能应用的背后都离不开AI技术算法模型,而神经网络结构对最终模型的效果起着至关重要的作用。为降低传统神经网络结构对人工经验和背景知识的依赖,近年来神经网络结构搜索(NA

CVPR 2024全部奖项公布!近万人线下参会,谷歌华人研究员获最佳论文奖

北京时间 6 月 20 日凌晨,在西雅图举办的国际计算机视觉顶会 CVPR 2024 正式公布了最佳论文等奖项。今年共有 10 篇论文获奖,其中 2 篇最佳论文,2 篇最佳学生论文,另外还有 2 篇最佳论文提名和 4 篇最佳学生论文提名。作为计算机视觉(CV)领域的顶级会议,CVPR 每年都会吸引大量研究机构和高校参会。据统计,今年共提交了 11532 份论文,2719 篇被接收,录用率为 23.6%。根据佐治亚理工学院对 CVPR 2024 录用数据的统计分析,从研究主题来看,论文数量最多的是图像和视频合成与生成

CVPR 2024满分论文:浙大提出基于可变形三维高斯的高质量单目动态重建新方法

单目动态场景(Monocular Dynamic Scene)是指使用单眼摄像头观察并分析的动态环境,其中场景中的物体可以自由移动。单目动态场景重建对于理解环境中的动态变化、预测物体运动轨迹以及动态数字资产生成等任务至关重要。随着以神经辐射场(Neural Radiance Field, NeRF)为代表的神经渲染的兴起,越来越多的工作开始使用隐式表征(implicit representation)进行动态场景的三维重建。尽管基于 NeRF 的一些代表工作,如 D-NeRF,Nerfies,K-planes 等已