在6月21日的华为开发者大会(HDC 2024)上,华为云发布了盘古大模型5.0,其创新的多模态生成能力,可以为自动驾驶领域提供更高质量的数据支持。
华为常务董事、华为云CEO张平安表示,盘古5.0通过创新的可控时空生成,大规模的生成和实际场景相一致的驾驶视频数据,有机会重塑自动驾驶的开发。
华为云盘古大模型5.0可控时空生成技术(STCG),赋予了模型理解并遵循物理规律的能力,这意味着,生成的视频不仅在视觉上逼真,更重要的是在车辆行为、环境互动等方面与现实情况保持高度同步。例如,车辆在不同摄像头视角间的平滑过渡,以及在不同天气和光照条件下行驶的自然表现,都显示了模型对空间和时间维度精准把握的能力。
通过盘古大模型生成的六摄像头视角视频,自动驾驶系统可以直接获取到全方位、高仿真度的训练素材。这些视频涵盖了从无车街道到复杂多车交互的不同场景,甚至包括不同气候条件下的行车情况,极大地丰富了训练数据集的多样性。尤为值得注意的是,模型在生成雨天视频时,还能细腻地模拟出车辆尾灯因光线昏暗而开启的细节,体现了其对真实世界复杂规律的深刻理解和学习能力。
张平安表示:未来,盘古的多模态生成还会支持更多的场景,更好的为自动驾驶服务。
关键字:华为云 大模型 AI 机器人
引用地址:
华为云盘古大模型5.0 加速自动驾驶技术快速成熟
推荐阅读最新更新时间:2024-11-12 08:54
极寒天机器人无人机代替人工保电网
1月30日上午10点整,在220千伏宝钢变电站驻守的机器人自动拔出充电插头、打开卷帘门、走出它的专属‘小屋’进入220千伏宝钢变电站设备区。在每一个设定的点位前,机器人会停下来,调节好“眼睛”位置,对运行设备表计、位置指示、运行温度等进行察看。 “白色的眼睛为普通可视光,功能简单。黑色的眼睛主要负责检测设备隐患,里面的红外测温仪能监测导线接头的温度。”国网乌鲁木齐供电公司变电运维室运行专责艾则孜江说。 机器人巡视。乌鲁木齐供电公司供图 据国网乌鲁木齐供电公司运维检修部介绍,这台高一米左右的智能巡检机器人具备越野功能,图像分辨率1080P,可30倍变焦,红外测温的温差不超过正负1度,摄像头能360度全方位旋转,在目前的天气情况下,
[机器人]
机器人手术是机器还是人在开刀?
接种宫颈癌(HPV)疫苗,是时尚还是必须?顶尖医院纷纷引入的达芬奇机器人手术,究竟是机器还是人在开刀?搜索引擎在前沿医疗技术应用中,是帮手还是“帮凶”? 昨天的上海交通大学医学院迎来一堂特别的思政课,学生与老师以案例为引,探讨当下与医学相关的热点话题。这是该校“网红”思政课《健康中国》本学期的收官之课,希望以案例教学模式引导学生自主学习,在学习中深化对“推进健康中国建设”的理解与思考。 上海交大医学院《健康中国》思政课由医学生主讲,以社会热点为教案素材。葛赟摄 社会热点成医学教学案例 今年7月,国内首个获批的宫颈癌二价疫苗上市。本月,四价宫颈癌疫苗宣布有望明年在沪上市。一时间,是否接种HPV疫苗,成为了社会热议的话题。 “接
[机器人]
依图发布首款AI芯片:专注于视觉推理领域
5月10日消息 昨日,人工智能企业依图科技在上海举行发布会,推出了一款云端视觉推理AI芯片“求索questcore”,以及基于该芯片构建的软硬件一体化系列产品和行业解决方案。求索是依图科技进入硬件领域后开发的首款芯片。 据介绍,求索是全球首款为云端定制的深度学习视觉推理芯片,由依图科技和AI芯片初创团队ThinkForce联合开发。其基于依图的ManyCore 架构,采用台积电16nm工艺,适用于人脸识别、视频结构化分析、行人再识别等图像和视频实时智能分析任务。作为云端AI芯片,求索是一个完整的、具有端到端能力的AI处理器。 在接受媒体采访时,依图科技表示,求索芯片不会单独售卖,会结合依图的硬件、产品或方案一同出售,目前已有不
[家用电子]
从分析师大会的九个关键词,“华为思考”的解读
相信大家都知道,关于 华为 的企业智慧和发展经验,有大量的文章和专著去讨论。这些论述不仅是ICT产业从业者和企业管理者的“必备教材”,甚至已经在某种程度上成为了“大众读物”。 然而有一个问题,那就是关于“华为思考”的解读,更多都是关乎于华为的发展轨迹,或者说其描述的是华为的过去。那么在此刻,华为如何思考现在和未来呢? 毫无疑问,华为正处在一个“临变”的奇点。作为一家企业而言,新技术、新需求、新市场的成熟,正在加速万物智能的构建,新的产业机遇汹涌升起;站在全球产业化的角度,众多技术轨迹开始由华为引领突破,从跟随者到探索者,华为行为方式、思考动机,以及社会责任正在发生深刻的变化;而从科学发展规律上看,从计算到网络,众多技术正在
[嵌入式]
靠人工智能加速自动驾驶实现,IP行业怎么蹭热度?
随着Google和Tesla这些非传统车厂推出 自动驾驶 车辆后,老牌业者如Toyota、BMW和GM也相继宣布将在2020至2025年间推出自动驾驶车辆上市,而实现更先进和更全面的自动驾驶的前提, 无非就是持续将更高深的 人工智能 (AI)注入车辆中。 对于自动驾驶车辆而言,人工智能的价值在于两个层次,其一,是管理替代人类预测、判断、操作等的功能;其二,则是支持人类思考与行为的人机接口(HMI)功能。 亚德诺(ADI)亚太区汽车事业部门策略营销与业务发展总监永井询也(Junya Nagai)说明,针对第一个层次的功能,重点是在实现第5级自动驾驶,也就是完全自动驾驶;而AI透过与人互动的讯息, 例如自然语言来执行机械操作以驾驶汽车
[嵌入式]
AI医疗探索前行:YY创始人李学凌体内植入芯片真相调查
科幻黑科技成了现实? 昨天,纳斯达克上市公司YY的创始人李学凌发朋友圈说:自己在体内植入了芯片。 “相信这是里程碑的一天,未来会有越来越多的人在自己的身体里植入芯片,以便于更好的了解自己。” 图片来自新浪科技 在下方的评论中,李学凌透露了芯片的植入方式与具体作用: “很高速的弹射进去,啪的一声就打进去了,没有一点疼感。” “取血,可以测量很多跟血液里面的成分相关的各种东西。” 这件事立刻引发了围观。 经媒体报道后,网友们浮想联翩,有人说:“想到了黑镜,尤其黑镜第二季,把芯片取出来,人的主导意识也被取出来了。” 也有人非常担心他……怎么过安检。 疑云丛生 不过,很快有一些业内人士提出了质疑:这个芯片好像哪里见过的。 著名医
[医疗电子]
OPEN AI LAB携手Arm中国、瑞芯微发布EAIDK
OPEN AI LAB联合Arm中国、瑞芯微发布EAIDK 2018年9月14日,上海讯,OPEN AI LAB联合Arm中国、瑞芯微在首届“Arm人工智能开发者全球峰会”上,正式发布了面向教育及创客的嵌入式人工智能应用开发平台EAIDK (Embedded AI Development Kit)。 Arm中国副总裁金勇斌在大会上正式发布EAIDK开发套件 EAIDK,即嵌入式人工智能开发系列套件,是包含硬件平台、嵌入式人工智能平台、人工智能算法以及应用软件的一体化开发平台。该平台从满足终端人工智能产品应用出发,硬件平台具备多样化语音、视觉等多传感器扩展和运动控制接口(可伸缩适应细分垂直行业需求),智能软件平台提供
[工业控制]
智能座舱大模型,混合算力还是全靠端侧输出
除了传统的LLM模型外,不少垂直领域的大模型也在飞速发展,尤其是在汽车领域,越来越多的车企开始考虑在车内引入AI大模型。如今汽车此前由于车端算力的限制,大模型很难运行在智能座舱上,而全程联网跑的座舱大模型在使用体验上又有所欠缺。然而,随着新一代智能汽车算力硬件纷纷进入下一阶段,如今智能座舱开始在新车型上铺开。 理想Mind GPT 去年年底,理想发布了最新的OTA 5.0版本,率先为Max车型升级了AD MAX 3.0智能驾驶。然而,这一次OTA还包括了最新的智能空间SS 3.0,为Max、Pro和Air车型正式引入了Mind GPT这一智能座舱多模态认知大模型。 理想从零构建了Mind GPT的原始基座模型,并采用了自研的Tas
[嵌入式]