【关注】马斯克：视觉神经网络实现的自动驾驶，安全性超人类十倍以上- 大数跨境

首页

【关注】马斯克：视觉神经网络实现的自动驾驶，安全性超人类十倍以上

新鼎资本

2021-09-18

9月17日上午，在海南省海口市召开的2021世界新能源汽车大会上，特斯拉首席执行官埃隆·马斯克通过视频发言时表示，未来的自动驾驶可以通过视觉神经网络实现，并且相比普通人驾驶有十倍以上的安全性。

近日，特斯拉向其抢先体验车队推出FSD（Full-self Driving，完全自动驾驶）Beta V10软件。这是在特斯拉AI Day上发布最新应用在自动驾驶上的视觉神经网络之后，技术上做了重要改进的的纯视觉自动驾驶方案新版本。

特斯拉CEO伊隆·马斯克称，有望在9月25日左右向所有特斯拉车主开放使用。FSD Beta 10的软件版本号为2021.24.15。在该版本软件的支持下，特斯拉汽车能够在高速公路和城市街道上虚拟驾驶，但它仍然被视为L2级驾驶员辅助驾驶，因为它需要驾驶员仍然对车辆负责，将手放在方向盘上，并随时准备好控制。

在Youtube（译为“油管”，是目前全球最大的视频搜索和分享平台）上参与测试的用户发布的针对性测试和路测结果来看，目前还有很多情景下会出现问题，一个最明显的提升表现在驾驶中可视化用户界面，越来越多的道路标识和交通标识物的识别走向细分化，但依然有部分道路标志还不能准确识别。

在近期的特斯拉人工智能日上，特斯拉AI负责人Andrej Karpathy和自动驾驶硬件高级总监Ganesh Venkataramanan介绍了纯视觉自动驾驶系统与FSD软件的最新成果，此前5月份，马斯克曾发文表示，特斯拉最新版本的FSD将取消毫米波雷达，采用纯视觉感知方案。

在自动驾驶感知领域，有两个明显区别的路径——纯视觉派和激光雷达派，纯视觉派认为单纯依靠摄像头就可以完成自动驾驶所需要的周围环境感知，特斯拉、极氪、百度都使用的是纯视觉感知方案。激光雷达派则以激光雷达为主导，配合毫米波雷达、超声波传感器、摄像头多传感器融合完成周围环境感知，商汤AR小巴、小鹏P5、蔚来ET7使用的是激光雷达方案。

商汤智能驾驶研发总监李怡康在接受澎湃新闻采访时表示，“无论是纯视觉方案还是多传感器融合的方案最终都是有可能实现L4或L5级别的自动驾驶的，区别在于，引入激光雷达实际上是把问题变简单了，因为我们引入了很多额外的信息，而且这些信息跟视觉很互补，有些信息，比如深度，它可以估算地很准确。假如最后两条路径都能实现L5级自动驾驶，那我相信多传感器融合这条路线可能会更快一些。当然，感知只是决定自动驾驶是否实现的因素之一。”

特斯拉“纯视觉派”技术路线：视觉神经网络

特斯拉人工智能与自动驾驶视觉总监Andrej Karpathy认为，将激光雷达添加到自动驾驶堆栈会带来其自身的复杂性。在CVPR 2021自动驾驶研讨会上，Karpathy，“你必须用激光雷达预先绘制环境地图，然后你必须创建一张高清地图，你必须插入所有车道及其连接方式以及所有交通信号灯，收集、构建和维护这些高清激光雷达地图是不可扩展的，让这个基础设施保持最新状态将是极其困难的。”

Karpathy表示特斯拉在其自动驾驶堆栈中不使用激光雷达和高清地图，“发生的一切，都是第一次发生在车内，基于围绕汽车的八个摄像头的视频”。

特斯拉汽车上安装了8个摄像头，摄像头没有深度信息，他们的目标之一就是形成矢量空间视图。那么要怎么知道旁边一辆车究竟在哪里又有多长呢？

首先的一个难点是，不同视角的摄像头都只能看到周边环境的一部分，有不同的校准（calibration）、位置（location）、取景方向（view direction）等，比如以下这张图，谁能知道这个点对应于相机视图的哪个点？而我们只有知道这些信息，才能把周围物体准确放到向量空间视图（vector space view）中。

因此就需要一种将多个摄像头的信息融合在一起的技术，特斯拉使用了在2017年提出，如今已经席卷自然语言处理和计算机视觉领域的Transformer神经网络（Transformer Neural Network）。然后则是加入有时间概念时间的RNN（Recurrent Neural Network，循环神经网络）以判断移动物体的速度以及对被遮挡物进行预测。RNN体现了“人的认知是基于过往的经验和记忆”的观点，通过记忆来处理任意时序的输入序列，从而对接下来要发生的事情进行预测。比如这里对被遮挡物预测，通过对遮挡前的特征和轨迹的记忆，使得视野被短暂遮蔽的情况下，依然可以预测遮挡视野后的物体运动轨迹，并记录已行驶过的路段的各种路标。

而对于深度信息，在缺少了雷达信息后，则需要通过对大量的有深度标注的相机数据进行训练得到的检测算法来得到。

激光雷达多传感器融合方案

激光雷达多传感器方案是以激光雷达为主导，毫米波雷达、超声波传感器及摄像头作为辅助。通过激光雷达发射激光束，测量激光在发射及收回过程其中的时间差、相位差，从而确定车与物体之间的相对距离，实现环境实时感知及避障功能。摄像头的价格在几十美元左右，而激光雷达则要昂贵的多，这或许也是很多纯视觉流派厂商一个没有说的难言之隐。

商汤智能驾驶研发总监李怡康向澎湃新闻介绍，“我们会做很多种传感器的评测，去找到最适合我们设计需求的传感器方案，然后通过自动化的算法将这些传感器摆放到最合适的地方，从而实现最优的环境信息获取。传感器之间是不在一个坐标系下的，我们通过自动化标定算法将不同传感器的特性及相关关系非常准确地找出来，然后设计融合感知模型，并用大量的感知数据去训练它，最终实现多传感器融合感知。”

自动驾驶底层逻辑是感知、决策、执行三个步骤的结合，对周围环境的周密感知是所有决策的基础，也是自动驾驶汽车的安全保障。在了解周围环境中物体的位置、速度和方向、路面的性质、路缘石的位置、信号（交通、道路标志）等之后，自动驾驶系统则要开始做计划和控制：首先是其他移动物体在接下来的短时间会做什么，然后是根据整体计划（比如规划的通向目的地路线）计划自己要做什么，最后就是告诉汽车要做什么。

来源：澎湃新闻

推荐阅读

》》北京屹唐半导体科技股份有限公司拟IPO

》》新鼎资本冠名第五届亚洲百佳球场颁奖盛典

》》小鹏汽车5月交付量同比大增483%，P7打破历史纪录

》》新鼎资本斩获2020投中榜五项大奖

》》新鼎资本已投上市企业动态出新！

》》希迪智驾深度参与的三项智能交通团体标准正式发布实施

》》新鼎资本已投企业地平线获新闻联播点赞，海光信息拟在科创板上市，燧原科技完成C轮融资18亿

》》紫光展锐新增融资53.5亿元，预计今年底申报科创板

》》博奥全集成芯片实验室获国家药监局应急审批批准！

》》长江产业基金：看好新能源汽车赛道，看好威马汽车

》》威马汽车与“金融国家队”达成115亿元战略合作

》》新鼎资本已投企业动静很大！

》》新鼎资本已投企业经营数据喜人！

》》小鹏汽车12月交付量5700台

》》浪潮携手广西打造“四个一”工程，助力企业数字化转型

》》希迪智驾成为业内首批获得“LTE-V2X协议一致性认证”证书企业

》》2020全年销量22,495辆，四季度销量创历史新高

》》新鼎资本已投企业云从科技完成科创板上市辅导，星环科技完成股改......

》》2020新鼎资本已投第五家上市企业——福昕软件上市交易

》》AI芯片设计第一股寒武纪今天成功登陆科创板

》》新鼎资本新三板精选层一号已投企业成大生物，科创板过会！

》》阿尔特成功过会品牌价值不断上升

》》威马汽车正式启动上市辅导，或成第一家登陆科创板“造车新势力”

》》浪潮云荣获CSA 2020安全磐石奖

》》创年度新高！小鹏汽车11月交付量4224台

》》AI独角兽“云从科技”科创板IPO申请获受理，2019年营收达8亿元

》》紫光展锐与中兴通讯达成5G战略合作，共同推动生态发展

》》智行者科技与一汽南京达成战略合作

》》驭势科技牵手一汽物流，打造物流创新技术标杆

》》京微齐力荣获“硬核中国芯-2020年度最具潜力IC设计企业”奖

新鼎资本简介

　　北京新鼎荣盛资本管理有限公司（新鼎资本），成立于2015年，为中国证券投资基金业协会备案的私募股权投资机构。目前管理规模近70亿元，发行备案的私募基金产品100余支，投资项目50余个。

　　新鼎资本聚焦于：芯片半导体，人工智能，生物医药，新能源汽车，四大行业龙头企业，上市前一级市场投资，上市后二级市场退出获取收益。

　　新鼎资本投资案例代表：寒武纪（688256）（AI芯片国内龙头）；小鹏汽车（XPEV)（阿里巴巴重仓新势力造车）；阿尔特汽车（300825）（国内汽车设计龙头）；亿华通(688339)（氢能汽车动力系统龙头）；云从科技（人脸识别国内龙头）；影谱科技（人工智能+广告文娱国内龙头）；第四范式（机器学习算法国内领先）；燧原科技（专注人工智能领域云端算力平台）；海光信息（国产CPU核心）；屹唐半导体（中国半导体装备产业的龙头企业）；紫光展锐（中国最大的泛芯片设计企业）；集创北方（国内显示芯片龙头企业）；京微齐力（北京唯一一家FPGA芯片企业）；泰科天润（新材料半导体龙头企业）；西人马（专注于芯片的IDM企业）;星环科技（业内第一家将大数据平台完整构建在基于容器的云平台上的企业）；灵汐科技（类脑芯片龙头）；博奥晶典（中国生物芯片研发、生产知名企业）；福昕软件（688095）（国内PDF领域龙头企业）；浪潮云（政务云领域的龙头企业）；地平线（中国领先的人工智能芯片设计商）；驭势科技（自动驾驶领域龙头企业）；智行者科技（国内无人车产业龙头企业）；希迪智驾（自动驾驶龙头及路端设备设计企业）；氢璞创能（国内电堆领域龙头企业）；清陶发展（国内固态锂电池产业化的领跑者）；泽景电子（国产HUD头部企业）；赛特斯（5G概念龙头股）；威马汽车（百度重仓新势力造车）；南孚电池（碱性电池龙头）；宏济堂（人工麝香垄断）；成大生物（人用狂犬病疫苗龙头）；泽生科技（心衰药物研发）；长风药业（呼吸系统药物研发）；东方略（中美新药研发对接平台）；祥云股份（磷酸一铵龙头）；中建信息（华为重要ICT分销商）等。

　　新鼎资本所获荣誉：2020年度最佳私募股权投资机构TOP100（投资中国）；2020中国最佳私募股权投资机构Top100（融资中国）；IPO最佳投资机构TOP100（IPO早知道）；中国半导体投资机构TOP100（中国半导体投资联盟）；2020年度中国电动汽车最佳投资机构TOP30（电车人）；2020中国投资机构软实力GP100（母基金周刊）；2019年度最佳私募股权投资机构TOP100（投资中国）；2019年度最佳私募股权投资机构TOP100（融资中国）；已投企业亿华通荣获投中2019最佳投资案例(投资中国）；2019年度优秀机构投资人（财视中国）；2019年度新三板砥砺坚守奖（第一财经）；2018年度“最佳私募股权投资机构TOP100”（融资中国）；2018-2019年度最具LP投资价值GP-私募股权投资机构50强(CLPA )；已投企业威马汽车、云从科技荣获投中2018最佳投资案例(投资中国）；“最佳信息技术产业投资基金合伙人”（CLPA）等近百项。

【声明】内容源于网络

新鼎资本

北京新鼎荣盛资本管理有限公司，专注于优质项目私募股权投资。尤其新能源汽车、芯片半导体、人工智能、商业航天以及生物医药等领域。只为优质项目！

内容 5350

粉丝 0

新鼎资本北京新鼎荣盛资本管理有限公司，专注于优质项目私募股权投资。尤其新能源汽车、芯片半导体、人工智能、商业航天以及生物医药等领域。只为优质项目！

总阅读1.2k

粉丝0

内容5.3k