自动驾驶取得突破!上海AI实验室联合团队获CVPR最佳论文奖论文|视觉|团队

发布时间:Apr 13, 2024 22:37 PM

温哥华当地时间6月21日,2023年国际计算机视觉与模式识别会议公布了最佳论文等奖项。上海人工智能实验室、武汉大学和商汤科技联合发表的自动驾驶通用模型相关论文从9155篇论文中脱颖而出,获得本届CVPR最佳论文奖。这是近十年来,计算机视觉三大顶级国际会议上第一篇以中国学术机构作为第一单位的最佳论文。

CVPR在学术界和产业界都有重要影响力。根据谷歌学术指标2022年列出的全球最有影响力的六大科学期刊/会议中,CVPR位列第四,仅次于《自然》《新英格兰医学杂志》《科学》。

入围本届CVPR最佳论文候选名单的作品来自谷歌、上海人工智能实验室、斯坦福大学、康奈尔大学等知名企业和科研机构。最终,上海人工智能实验室联合团队的研究成果《以路径规划为导向的自动驾驶》摘取CVPR2023最佳论文奖。这篇论文首次提出感知决策一体化的自动驾驶通用大模型UniAD,开创了以全局任务为目标的自动驾驶大模型架构先河,为自动驾驶技术与产业发展指出了新方向。


自动驾驶取得突破!上海AI实验室联合团队获CVPR最佳论文奖论文|视觉|团队

UniAD:业界首个感知决策一体化的自动驾驶大模型

上海人工智能实验室青年科学家李弘扬介绍,作为一种高度复杂的技术,自动驾驶不仅需要多个学科领域的知识和技能,包括传感器硬件、机器学习、多模态融合等,还需要适应不同国家和地区的道路规则和交通文化,与车辆及行人进行良好的交互。自动驾驶系统包含三大主任务——感知、预测和规划。当前,业界主流的方案架构是分别采用不同的模块来处理这些任务,但由于各模块并非以驾驶为最终目标进行优化,自动驾驶系统的整体性能提升受到了很大限制。

在UniAD中,研究人员首次将感知、预测和规划等三大类主任务、六小类子任务整合到统一的基于Transformer的端到端网络框架下,实现了全栈关键任务驾驶通用模型。在nuScenes真实场景数据集中,UniAD的所有任务均达到“领域最佳性能”,尤其是预测和规划效果远超之前的最佳方案。其中,多目标跟踪准确率提升20%,车道线预测准确率提升30%,预测运动位移和规划的误差分别降低38%和28%。


自动驾驶取得突破!上海AI实验室联合团队获CVPR最佳论文奖论文|视觉|团队

在晴天直行场景中,UniAD可以感知左前方等待的黑色车辆,预测其未来轨迹,并立即减速以避让,待黑车驶离后再恢复正常速度直行。

在雨天转弯场景中,即便面对视野干扰较大且场景复杂的十字路口,它也能通过分割模块生成十字路口的整体道路结构,并完成大幅度的左转。

在夜晚视野变暗的情况下,它能感知到前车并完成先静止、后左转的规划。


自动驾驶取得突破!上海AI实验室联合团队获CVPR最佳论文奖论文|视觉|团队

本届CVPR上,上海人工智能实验室有12篇论文入围“Highlight”名单,覆盖视觉基础模型、通才模型、三维视觉、底层视觉、视频检索、物体检测、姿态估计、自动驾驶等相关领域的研究。其中,UniAD相关工作获最佳论文奖、三维物体数据集研究工作入围最佳论文候选。

上海国际友好城市青少年“玩转”夏令营体验传统文化,做盘扣、学剪纸、包饺子国际|青少年|包饺子
上海国际友好城市青少年“玩转”夏令营体验传统文化,做盘扣、学剪纸、包饺子国际|青少年|包饺子

做盘扣、学剪纸、包饺子,走进夏令营志愿者家中,感受上海人家的生活气息……20日,2023上海国际友好城市青少年夏令营在上海市市东实验学校正式开营,来自12个国家13个城市73名营员汇聚上海,与上海同龄人共同开启一年一度的国际友城青少年交流盛会。小伙伴们一起开展中文和中国画、非遗、汉服、盘扣、剪纸、篆刻、书法、陶艺、茶艺、衍纸、舞龙等中华优秀传统文化课程学习、友城青年论坛交流、城市人文风貌考察、高校及场馆参访、城市定向挑战以及当地家庭生活体验等活动,绽放青春风采。除了丰富多彩的夏令营实体活动体验外,营员和志

本科阶段志愿填报今天启动!这些重要提醒和建议必读,@高考生阶段|本科|志愿
本科阶段志愿填报今天启动!这些重要提醒和建议必读,@高考生阶段|本科|志愿

@所有高考生,根据高招日程安排,7月1日—2日每日上午8:00—晚上8:00,7月3日上午8:00—12:00,考生填报本科阶段除综合评价批次外的其他批次志愿。本次志愿填报内容具体为零志愿批次、提前批次、艺体类甲批次、地方农村专项计划批次、特殊类型招生、普通批次。填报方式为:本市应届高中毕业生由学籍所在中学统一安排;非本市应届高中毕业生由报名所在区招办统一安排。要特别提醒考生的是,7月1日-3日志愿填报期间,由于综合评价批次录取尚未完成,因此填报过综合评价批次志愿的考生仍须认真填报本科阶段其他批次志愿

投资+服务推动抗癌药进临床|孵化器里的创业故事,上市公司老总二次创业生物|孵化器|临床|孵化器
投资+服务推动抗癌药进临床|孵化器里的创业故事,上市公司老总二次创业生物|孵化器|临床|孵化器

最近,经国家药品监督管理局批准,惠和生物研发的1类创新药CC312启动一期临床试验,用于治疗复发/难治性CD19阳性B细胞恶性血液肿瘤。这是国内第一款、全球第三款获批进入临床的基于CD28共刺激信号的三特异性抗体药物。说起这款三抗新药的研发往事,惠和生物创始人朱化星博士记忆犹新:“2019年前,全球还没有一款三抗药物获批进入临床,一些投资人看不懂CC312。在公司发展的关键时期,诺恺莘康基金投资3000万元,帮助我们完成了A轮融资。”诺恺莘康是莘泽创业孵化器发起的风投基金。这家在张江科学城深耕多年的孵化

“紫东太初”全模态大模型发布,精准定位三维场景,听出《月光曲》畅谈贝多芬图像|应用|贝多芬
“紫东太初”全模态大模型发布,精准定位三维场景,听出《月光曲》畅谈贝多芬图像|应用|贝多芬

不仅可以听出《月光曲》畅谈贝多芬,也可以在三维场景里实现精准定位,还能够通过图像与声音的结合完成场景分析。6月16日,在人工智能框架生态峰会上,中国科学院自动化研究所正式发布“紫东太初”全模态大模型。该模型是在千亿参数多模态大模型“紫东太初”1.0基础上升级打造的2.0版本,在语音、图像和文本三模态的基础上,加入视频、传感信号、3D点云等模态数据,突破了认知增强的多模态关联等关键技术,具备全模态理解能力、生成能力和关联能力。会上,自动化所所长徐波首次对外实时展示了“紫东太初”全模态认知大模型在音乐理解与

坚持不懈就是人生一次历练,零陵中学肌无力考生完成高考:无论经历怎样的坎坷高中|学校|高考
坚持不懈就是人生一次历练,零陵中学肌无力考生完成高考:无论经历怎样的坎坷高中|学校|高考

“高考,是我们人生中的一次历练。回忆整个高三的备考,不禁感叹时间的宝贵,无论经历了怎样的坎坷,我相信只要坚持不懈,都将成为我一生的财富。”今天,零陵中学高三学生小宋完成了上午的高考外语听说测试后,从华东理工大学附属中学考点出来,这位坐在轮椅上的高三毕业生说:“虽然学业和生活对我而言,都是不小的考验,但身处逆境,面临诸多困难,从未放弃过对高考的梦想。”小宋自幼患有先天性肌营养不良,高中进入零陵中学后,学校为他提供了低楼层且靠近厕所的教室,方便进出,让他更自信地面对学习生活。“在学校,我遇见了许多善良、热情的