觉非科技李东旻:智能驾驶向大模型的进化与感知决策新范式的诞生

news2024/11/24 15:33:14

由亿欧汽车主办“AI与新一代车载智能感知融合创新论坛”近日登陆2023世界人工智能大会(WAIC)。觉非科技CEO李东旻受邀发表了“智能驾驶向大模型的进化与感知决策新范式的诞生”主题演讲,从产业趋势结合技术发展特点以及在感知决策中的能力应用等角度进行了系统化介绍。

觉非科技:自动驾驶量产时代的软件Tier1

李东旻首先就“软件定义汽车”背后的核心驱动力进行了阐释。首先,整个汽车的电子电气架构已经基本转向了大算力平台与中央软件平台结合的架构,这使得以软件为核心的解决方案得以“上车”。

 其次,国内主机厂正在不断增加对自动驾驶技术的投入,以确保响应快速的迭代周期,而这也为软件的发展带来了不断扩展的蓝海空间。

与此同时,AI模型将进一步影响汽车数字化程度,车辆软件功能与OTA将主要围绕数字化进行升级,且未来大部分升级将在软件层面进行,而不论是大模型还是小模型,都将使汽车越来越趋近于数字化产品,这种转变带来的化学反应和新产品形态,将在未来发展中具备巨大的潜力。

自动驾驶向大模型的进化

演讲中,李东旻介绍了自动驾驶发展的不同阶段。在第一阶段中,智能驾驶解决方案依靠的是各个小模型的堆叠,也就是通过多个独立“小模型”构成自动驾驶的感知、跟踪、融合、预测等能力,而这也是现阶段自动驾驶解决方案的主要输出方式。

觉非科技的融合定位能力、激光点云融合感知能力即是自动驾驶小模型的典型代表。

 “从2022年开始,觉非科技的融合定位产品就已经开始量产上车。”李东旻提到。觉非在自动驾驶车辆的定位上,融合了激光点云或者视觉感知信息、车身信号与高精度地图数据,通过适配层、算法支撑层与融合层,将多种车辆信息与环境信息进行实时数据融合计算,可应对各类道路复杂场景。

在这个阶段中,觉非科技业界首创完成了3D SPConv(稀疏卷积)在嵌入式平台的移植和优化,并完成了全息路口超大规模点云感知。感知范围可覆盖10万+平米超大场景,单帧可完成超过500个目标输出,不断提升着自动驾驶的安全性与鲁棒性。

在第一阶段中,觉非科技通过在算法、数据上的积累,为第二阶段,即“自动驾驶大模型与大数据方案”的到来,创造了先天的优势与壁垒。

而在大模型的部署上,难点在于算力与数据的支持。举例而言,大模型所需的数据量通常是小模型的100倍以上,以前如果用10万帧或100万帧的数据训练就可以达到量产标准,而现在大模型则需要至少10亿帧的数据作为起点。

“整个行业在自动驾驶技术路径上达成了惊人的共识,即都希望在自己的技术路径上使用Transformer大模型。因此无论是新势力还是传统主机厂,都在自研或与觉非这样的合作伙伴进行技术合作,开展大模型的研发与量产。”李东旻提到。

 通过在车端与路侧的大量技术实践,觉非积累了覆盖不同场景的自动驾驶数据集,并转化成了数据服务平台,为大模型的发展奠定了坚实的技术基础。

近期觉非也推出了BEV+Transformer算法量产架构。这套量产架构通过规模化数据采集,生成冷启动模型,而后通过量产化制图能力产生地图数据库,结合觉非自研的数据中心实现快速不断的迭代,供给生成BEV+Transformer的算法训练数据,进而实现大模型的正向循环。

在这套量产架构的支撑下,觉非同时推出了面向高速NOA的地图定位量产方案。方案通过车机导航地图或众源地图,结合量产车实时感知结果,可满足车辆在高速场景下的高精定位需求。

 

 

 

“大模型的出现将带动包含自动驾驶在内的整个科技生态链的变革:软件吞噬世界,平台吞噬软件,云吞噬平台。而这条科技食物链正迎来一位新的霸主,大模型正在吞噬云。很多玩家正在把精力放到大模型的应用上,也就是自动驾驶的各类衍生功能,而未来真正的核心玩家,则是奔着大模型的底层路线去探索,这个底层路线包含了大数据、算力布局、数据传输等等问题。”李东旻提到。

对于觉非科技而言,大模型将引发技术原生能力的不断提升,也就是以大模型为基础,开发自动驾驶相关能力与原生技术方案,这同时也让觉非拥有了颠覆与创新的新机会。而对于大模型成为产业应用与基座,还需要有场景深度融合的体系以及开放的生态来激发创新。觉非科技希望能够携手更多合作伙伴,共同推动正在发生着的产业技术变革。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/745600.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

红队打靶,红日靶场系列,红日靶场4

文章目录 环境搭建:外网渗透:Struts2phpmyadmintomcat 内网渗透msf上线建立代理内网信息收集密码获取总结 环境搭建: 攻击机: 真实机win10 kali : 192.168.0.128 靶机: web:192.168.183.130, 19…

【图像处理】Python判断一张图像是否亮度过低

比如: 直方图: 代码: 这段代码是一个用于判断图像亮度是否过暗的函数is_dark,并对输入的图像进行可视化直方图展示。 首先,通过import语句导入了cv2和matplotlib.pyplot模块,用于图像处理和可视化。 …

新版studio没法筛选Error

目录 方式一 简单粗暴,针对怀旧者,可切回原版log视图 方式二 学习新的log过滤方法 升级新版本AndroidStudio后,log日志变成以下样子,发现之前过滤error,infor的tab都不见了,瞬间不淡定了,查阅资料才发现…

运维小知识(一)——centos系统安装(小白入门级)

目录 1.制作系统U盘 2.安装centos系统 3.系统配置 3.1【语言】配置​编辑 3.2【软件选择】配置 3.3【安装位置】配置 3.4【主机名、root密码、网络】配置 1.制作系统U盘 首先下载软件ventoy,制作系统U盘,买个新U盘。先在笔记本电脑安装ventoy软件&a…

MongoDB安装使用

部分转载于:MongoDB安装配置教程(详细版) 文章目录 1. mongodb server安装使用2. mongodb客户端连数据库背景 1. mongodb server安装使用 前言:MongoDB是前端开发人员普遍使用的数据库,因为MongoDB不需要图形界面&…

YiOVE书源:不只是书源,还有对书源的一些预处理,比如提前查看书源数量,以及包含哪些小说站

引言 我是一个小说爱好者,阅读APP更是其中的效果斐然的不错宝器,平时自己也会收集一些书源。但是在这过程中产生了一些需求,比如:书源的数目是多少?书源链接还有效吗? 于是,自己基于Flask写了…

推荐这7个交互软件,交互效果更丰富

在现代Web设计中,交互效果是吸引用户注意力、增强用户体验的关键因素之一。通过使用交互效果软件,设计师可以为网站和应用程序增加动态元素和交互特性,提供更具吸引力和互动性的用户体验。本文将介绍7个操作简单,交互效果丰富的交…

【运维工程师学习四续集】Web服务之Linux配置安装Nginx

【运维工程师学习四续集】Web服务之Linux配置安装Nginx 0、查看是否安装wget1、安装wget2、下载 Nginx 安装包wget下载nginx安装包 3、解压nginx tar包4、安装相关依赖文件解释 5、切换到nginx目录6、配置当前nginx7、编译安装nginx8、切换到nginx的sbin目录9、查看nginx的版本…

RabbitMQ集群搭建与高可用实现(未完待续)

文章目录 一、RabbitMQ集群概述1、为什么要使用RabbitMQ集群2、RabbitMQ如何支持集群3、RabbitMQ的节点类型 二、普通集群1、什么是普通集群2、Docker搭建普通集群模式(1)安装docker(2)安装RabbitMQ(3)检验…

线程任务异步回调

1、需要掌握概念 //同步,异步,异步回调 //MQ消息中间件 例子:工作邮件、微信、QQ 原理: 同步、异步、异步回调 2、代码 public static void main(String[] args) throws Exception {//同步,异步,异步…

X2000 Linux 测试VL53L4CD

在X2000 Linux 调试VL53L4CD驱动章节中已从官方下载了驱动文件,文件如下: 一、 拷贝测试代码 将user拷贝到sdk\demo下,如下所示: 2、修改Makefile 修改\user\test\Makefile指令CC为mips-linux-gnu-gcc CC : mips-linux-gnu-gcc…

北约峰会遭遇RomCom黑客组织攻击

昨天(7月11日),微软正式披露了一个未修补的零日安全漏洞,该漏洞存在于多个Windows和Office产品中,可以通过恶意Office文档远程执行代码。 未经身份验证的攻击者可在无用户交互的情况下利用该漏洞(跟踪为CVE-2023-3688…

IMU背包对动物行为影响测试

动物行为是一种可观察和可测量的指标,轻量化和低成本的传感器技术的先进发展为研究人员提供了以最小干预来跨越空间和时间跟踪动物的机会。特别是对于家禽业来说,已经从传统的笼养系统转变为无笼养系统。许多技术可用于检测大群鸡的行为、活动和位置。为…

哈希的应用->布隆过滤器

为什么用布隆过滤器 这个是基于位图的一个超级牛皮的一个数据结构。举个例子,假设我们创建Steam账号,我们的账户名字是不允许重复的,所以我们需要找到一个没有人使用过的名字,但是我们得知道现在这个名字是否有人用过&#xff0c…

VMware ESXi 7.0 U3n macOS Unlocker OEM BIOS 集成网卡驱动和 NVMe 驱动 (集成驱动版)

VMware ESXi 7.0 U3n macOS Unlocker & OEM BIOS 集成网卡驱动和 NVMe 驱动 (集成驱动版) ESXi 7 U3 标准版集成 Intel 网卡、USB 网卡 和 NVMe 驱动 请访问原文链接:https://sysin.org/blog/vmware-esxi-7-u3-sysin/,查看最新版。原创作品&#x…

利用Docker部署程序

目录 一、安装Docker程序 二、安装MySQL 三、安装MongoDB 四、安装Redis 五、安装RabbitMQ 六、部署人脸识别程序 一、部署工作流项目 二、打包Java项目 三、部署Java项目 一、安装Docker程序 这节课我们要利用Docker环境部署很多东西,有数据库、人脸识别程…

冯诺依曼结构和操作系统的理解

在正式讲解进程之前,需要先铺垫一些基本知识. 目录 冯诺依曼结构 操作系统 冯诺依曼结构 这个名词相信大家非常熟悉,我们常见的计算机,如笔记本。我们不常见的计算机,如服务器,大部分都遵守冯诺依曼体系。 这张图…

Tomcat工作原理

一、Tomcat架构 ### 说明: Server:表示整个 Tomcat Catalina servlet 容器,Server 中可以有多个 Service。(可以通过telenet 8005后连接后输入“SHUTDOWN” 注意这里是大写,来关闭服务)Service&#xff1…

宠物用品小程序怎么做

宠物用品小程序功能介绍: 1. 商品管理: 宠物用品小程序提供了商品管理功能,商家可以方便地添加、编辑和删除商品信息。用户可以浏览并选择合适的宠物用品,如食品、玩具、服饰等。 2. 订单管理: 用户可以在宠物用品…

区块链服务网络BSN季度版本迭代说明【2023年Q2】

根据区块链服务网络发展联盟计划安排,BSN将每周进行一个小的版本迭代,每季度进行一个大的版本迭代,目前区块链服务网络(BSN)已完成最新季度版本迭代。 我们将按照BSN官方专网(国内版和国际版)、…