范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文
国学影视

他用计算机视觉驱动自动驾驶上海科技35U35张力

  "
  为什么我们现在能够谈论自动驾驶?
  这背后的计算机视觉技术
  起到了非常关键的作用。
  "
  复旦大学大数据学院青年研究员、2021上海科技青年35人引领计划(35U35)获奖者张力,在2022复旦大学管理学院科创周系列论坛之"科创先锋论坛·未来力量"上,围绕计算机视觉与自动驾驶进行了阐述。
  "What"和"Where"
  一般来说,
  人工智能的视觉算法,
  主要解决两个基本感知问题:
  What 和 Where。
  What 即识别物体是什么,而 Where 指回答物体在哪里。"如果我们粗略地框出物体的位置,就是一个比较经典的目标检测问题,如果我们用一个非常精细的像素级标明它的位置,这就是一个图像分割问题。"张力解释说,"如果我们能够回答这两个最关键的问题,我们就能够解决最根本的视觉感知问题。"
  张力的课题组,
  致力于回答"What"和"Where",
  不仅对图像分类与图像分割感兴趣,
  还关注自动驾驶场景,
  从传统的卷积神经网络,
  到自注意力机制神经网络;
  从静态的网络到动态的网络,
  从静态的图像到动态的视频;
  也包括从二维感知
  到三维感知。
  计算机视觉对于自动驾驶的成功起到了非常关键的作用。2012年开始,图像的准确识别让我们能够通过计算机完成视觉感知,并输入到下游帮助判断下一步的动作。
  让计算机看到一只猫
  识别到到图片上有一只猫,
  这一对人类而言非常简单的任务,
  对于计算机却是非常难的。
  因为计算机看到的并不是一只猫,
  而是一个非常高维的矩阵。
  图像识别就是计算机将一个高维的矩阵识别成一只猫。张力介绍说,如果相机或者摄像机旋转一个角度,这个矩阵就会发生剧烈的变化,这时人工智能系统或者计算机视觉系统依然不能出错,识别结果必须还是那只猫。
  图像识别分类会细化到这是一只什么猫。"如果猫的背景很嘈杂、有不同光照、或是猫的身体有遮挡,我们都希望计算机还是能识别出这只猫。"张力说,"庆幸的是这个领域在2012年就突破了这些挑战,计算机总是能够识别出那只猫。"
  当然,仅仅识别一只猫是远远不够的,2012年的一项突破性技术就是科学家用到神经网络、深度学习技术,在100万数量级的图像分类比赛中,打败了当时所有非深度学习的方法,这个成就加速了计算机视觉的发展,也直接推动了深度学习与人工智能技术的突破。
  不断驱动技术创新
  推动计算机视觉在自动驾驶领域的落地应用
  2021年,张力的科研团队第一次提出解决视觉稠密预测问题的序列到序列网络架构模型 SETR (CVPR 2021) ,并且提出线性复杂度方法 SOFT (NeurIPS 2021) 解决了 Transformer 模型计算复杂度二次增长的难题。他说:"当时我们在 MIT ADE20K 这个数据集取得了世界最好的成绩,排名第一"。 目前 SETR 一年多时间 Google scholar 的引用数已经超过了1000次。
  纯视觉的自动驾驶只依赖于RGB相机输入,能够推理出物体在三维空间中的位置,这对自动驾驶是一个非常关键性的技术。"这位同学离我多远?人类可以很简单地回答出来,但对计算机来说这是一个很难的问题。"张力介绍说,
  "我们提出一个纯视觉的解决方案
  Ego3RT (ECCV 2022)。
  只依靠RGB的输入,
  不仅能检测到周围物体的三维位置,
  而且能直接构建出鸟瞰图(BEV),
  就是在一个上帝视角感知
  哪个是车道线、哪个是行驶路面、哪个是车辆。"
  完成鸟瞰图的构建后,张力的科研团队又提出了PolarFormer的方法(AAAI 2023),通过笛卡尔坐标系转化到极坐标系,相当于上帝视角不再是一个标准的矩形,而是一个射线状的表征空间,能够更好地帮助回答What和Where的感知计算任务。为了解决如何融合RGB相机以及和激光雷达的问题,张力团队又提出了多传感器融合的工作DeepInteraction (NeurIPS 2022),并且取得自动驾驶权威数据集 nuScenes 3D目标检测榜单第一的成绩。张力介绍说:
  "
  在自动驾驶权威数据集nuScenes的
  3D目标检测任务中,
  我们几乎是唯一取得
  前列成绩的高校团队。
  我们的代码也已经全部开源。
  "
  当时,张力团队把新开发出的技术SiamMask (CVPR 2019, TPAMI 2022)应用在牛津的生物实验室的小白鼠实验中。"他们以前对小鼠的活动记录只能通过人工去标记。"张力介绍说,"用了我们的算法以后,AI能够自动地跟踪多个小白鼠的活动并记录下来。"
  "生物科研人员的原话是他们看到这项技术后‘泪流满面’,因为AI改变了他们过去几十年以来繁冗的工作方式,这是一个AI赋能多学科的例子。"张力说。
  上海科技根据张力在2022复旦大学管理学院科创周系列论坛上的报告整理

科研人员首次在南极洲雪中发现微塑料原标题科研人员首次在南极洲雪中发现微塑料据央视财经频道9月26日消息,科研人员从南极洲最大的冰架罗斯冰架沿线的不同地点采集了19个雪样本,在每个样本中都发现了微塑料,这可能意味着塑中子点石成金的魔法炮弹作者高丙水唐晓东神仙故事里的点石成金,大家一定很向往吧!虽然源于传说,可点石成金并非奇谈。科学家们认为,这种现象不仅在宇宙中真实存在,而且构建了我们身处的这个多彩世界的元素基础。自赏读相知相惜,莫失莫忘作者倚窗望月我不知道,山有多高,水有多长,但我知道,只要用心去做,就一定能够到达彼岸的方向我不知道,等待是苦涩,还是甜蜜但我知道,有一个人在心上就足以安暖心房仰望,天空之上,鸿雁嘹古都钓韵格律诗词第012期9。27(周二)古都钓韵统稿独云卷云舒菊香盈九月,风冷饮杯凝。晴夜摩孤枕,翠帘书一灯。风金登仁(江西)秋风一夜吹,凝似又春时。荷叶无精彩,枫红锦绣诗。月影菊香王新华(河北)露浸滩边五十岁的女人,不可以失去自我五十岁的女人,不可以失去自我五十岁的女人,什么都可以失去,但是唯独不可以失去自我。人到五十,父母可能会离你而去。但是我们作为女儿,尽力做好小棉袄,为父母的晚年生活尽自己最大努力。生可以和不可以人的一生,应该有崇高的品德,高尚的情操,为祖国为人民建功立业。垂范百世,流芳千古,青史留名。为善则流芳百世,为恶则遗臭万年。民族英雄岳飞留芳百世,大汉奸秦桧遗臭万年。做人,可以行善秋夜随笔在我的后花园,可以看见两株树,一株是枣树,还有一株也是枣树。这是鲁迅先生秋夜里开头的一段句子。我不知道当时鲁迅的心情是怎样的,也体验不到他看完一株枣树,再看另一株枣树的感觉。是否与仅一夜之间,我的心判若两人嗨,晚上好,我是你们的情感小博主邮递员十三。今晚跟大家分享来自第419个故事。仅一夜之间,我的心判若两人。人间失格十三,你好,我想投稿,说说我的故事。我是一个内向的人,以前上学那会散文诗丨秋色秋色文李英利秋色吸引着我们,我们迷恋着秋色。秋风是多么温柔啊!秋风像母亲温暖的手,轻轻地抚摸着我们。它吹来了庄稼的馨香,送来了树叶的飒飒欢笑。山坡上的高粱火红一片,绿中带黄的叶子轻(科技)我国成功发射试验十六号AB星和试验十七号卫星9月27日7时50分,我国在太原卫星发射中心使用长征六号运载火箭,以一箭三星方式,成功将试验十六号AB星和试验十七号卫星发射升空,卫星顺利进入预定轨道,发射任务获得圆满成功。9月2美理直气壮地将月球飞船回滚机库,体面避免10月与我国同台竞技9月26日美国东部时间周一晚上11点21分,NASA(美国宇航局)宣布阿尔忒弥斯一号月球火箭在伊恩飓风前离开肯尼迪航天中心发射台39B,,登上履带式运输机,开始其4英里的长途跋涉,
散文苏银东冬天的童话作者苏银东DavidBartusPhotographer那年,秋天似乎有点耐不住性子,来得特别早。夏日酷暑,刚刚退出季节的舞台,秋天便迫不及待粉墨登场。一叶知秋。一场凝结着愁绪的绵科技云本期观察水下机器人可潜行深海的自主水下机器人日前,我国研制的矿址近底自主光学精细调查测量系统洞察号自主水下机器人,在西太平洋先驱多金属结核矿区完成了5100米潜深海试,并获得了多金属结核矿区近底高清iQOO11Pro评测,全能的水桶旗舰,10分钟就可充满电第二代骁龙8处理器的发布,加快了各个手机厂商推出新款旗舰手机的步伐,iQOO也是在2022年底发布了iQOO11系列手机。相比其它第二代骁龙8手机,iQOO11Pro也有着自己的独iQOO11评测双旗舰芯片加持,影像与性能再次进化南方网讯(记者张霜)说起iQOO,这个手机品牌无论是主打旗舰的数字系列,还是针对酷玩一族的Neo系列,它在产品设计性能操作和综合体验上都为消费者带来了不少惊喜。当前,在手机品牌更多日薪720元月入过万!这个行业,春节抢人快速激增的物流订单使得快递行业面临人力紧缺的局面,加上今年不少快递人员都有回家过年的意愿,如何招人留人,成为很多快递企业面临的一大难题。今年回家过年吗?一家快递物流公司北京营业部员双11,一场掩耳盗铃的自嗨?毫无疑问,双11购物节算得上是国内商业史上最伟大的创意之一,不仅成为了全民关注的购物消费盛宴IP,见证了国内电商市场飞速繁荣的发展,更是让电商购物在人们心中的地位上升到了一个新高度东北大学以第一完成单位在Science上发表王国栋院士袁国教授研究团队研究成果2023年1月13日,Science以长文(ResearchArticle)形式在线发表了东北大学轧制技术及连轧自动化国家重点实验室王国栋院士袁国教授研究团队在超高强钢铁材料增塑机GNSS(二),自动驾驶定位团队的保护伞在GNSS的定位导航授时三大功能中,定位功能无疑是出镜率最高的那为奶油小生。其定位精度大多数情况下直接决定了汽车驾驶自动化系统可以实现的级别而定位可靠性则决定了车辆开到沟里与撞上马分享三款录音转文字的电脑软件大家平时会使用录音转文字功能吗?例如遇到重要的内容或是会议,我会先通过录音录制,之后有时间再使用转换软件,将录音转为文字,然后把内容整理出来。那你们知道录音转文字电脑软件有哪些吗?Engineering复旦大学丁建东研究团队组织工程与再生医学中与生物材料相关的细胞微环境新文速递近日,复旦大学丁建东研究团队在中国工程院院刊Engineering2022年6期刊发组织工程与再生医学中与生物材料相关的细胞微环境一文,文章讨论总结了影响细胞微环境的诸多因数字化口腔种植设计软件ampampquotDentalNaviampampquot好评如潮近日,雅客智慧研发的雅智口腔手术机器人得到了一致好评,特别是其中的种牙软件,不仅专业高效,更是为患者提供一站式便捷化高效的服务。雅客智慧(北京)科技有限公司是一家从事口腔手术机器人