说起英伟达,最为大众所熟悉的就是由英伟达(NVDA.US)设计研发的PC独立显卡,占PC端独显市场超7-8成市场份额,是GPU技术领域当之无愧的领导者。GPU技术乃英伟达的立足之本,在GPU核心的全面带动之下,英伟达业绩屡创辉煌,股价更是屡创新高。
作为一家市值超7000亿美元的芯片龙头,英伟达可不仅仅是显卡设计厂商这么简单,以GPU核心为基础,英伟达已将业务范围进一步辐射至数据中心、高性能计算、AI 等核心科技领域,其基于GPU技术构建的软硬件一体生态体系更是构建近期火爆全球的“元宇宙”的底层技术,以GPU为核心创造的新型自动驾驶技术可能将成为自动驾驶领域不可或缺的一环,而这项技术可能让特斯拉都瑟瑟发抖。
说起元宇宙,多数人可能首先想到的可能是已经为全面进军元宇宙而改名Meta Platforms(FB.US)的Facebook,但我们必须得了解的一点是,元宇宙的建立离不开底层硬件和核心开发软件的支持,而这一块,正是英伟达最擅长的领域,甚至可以说是只有英伟达才能为建立元宇宙打下坚实基础。元宇宙华丽、天马行空的世界构建离不开顶级图像技术,如电影《头号世界》那般令无数玩家向往的虚拟世界,都是顶级图像处理技术打造出的杰作,而图像技术则离不开该领域龙头英伟达引以为傲的GPU技术及配套开发组件的强力支持。
在昨日的GTC大会上,英伟达首次公开以AI驱动的自动驾驶助手——英伟达Drive Concierge。据了解,Drive Concierge 是一个AI自动驾驶语音助理,类似“Siri”,它结合了语音辅助、驾驶员监控和自动停车技术,并且还能够执行从简单到复杂的语音命令,比如打电话进行预订,并且能为每个乘客提供自己的个性化虚拟助手。
更重磅的消息是,英伟达推出了DRIVE Hyperion 8,这是一款全自动驾驶系统的计算机架构和传感器系统的集成平台,简而言之,就像是一个集合了各种自动驾驶功能模块的全栈式自动驾驶平台,黄仁勋表示该平台可用于 2024 年的车型。该平台由英伟达的Orin系统芯片、人工智能软件和Luminar(LAZR.US)的远程Iris激光雷达等传感器驱动。
Omniverse——仿佛为元宇宙而生
智通财经APP了解到,英伟达开发的Omniverse平台能够运行具备真实物理属性的虚拟世界,并与其他数字平台相连接,是一个为虚拟协作和实时模拟所打造的专业平台。创作者、设计师和工程师等专业或非专业人士可以连接主要设计工具、资产和项目,从而在共享的虚拟空间中协作和迭代。技术开发商和软件提供商还可以在模块化平台上构建功能强大的工具来扩展其功能。
安信证券在研报中称,Omniverse 已广泛应用至多个行业,将虚拟世界的协同真正落到实处。Omniverse 已广泛应用在海内外传媒娱乐,建筑、产品设计、科学运动和仿真、自动驾驶、工业机器人等六大领域。比如,在产品设计方面,宝马和英伟达宣布共同利用 Omniverse 平台打造虚拟工厂,探索虚拟、数字规划领域的新前景。
英伟达 CEO 黄仁勋表示,宝马在物理世界中建造任何产品前,可以先虚拟地设计、规划和运营未来工厂,而这也代表了制造业的未来。据了解,宝马是第一家使用 Omniverse 设计整个工厂的端到端数字化双胞胎的汽车制造商。
安信证券表示,Omniverse 能够模拟出完整的工厂模型,包括员工、机器人、建筑物,装配部件等,让全球生产网络中数以千计的产品工程师、项目经理、精益专家在虚拟环境中进行协作,在真实生产新产品前,完成设计、模拟、优化等一系列复杂的过程。此外,Omniverse 还有针对 AEC 建筑行业的 View、方便机器人仿真结构学习的 Issac Sim,可以运用渲染效果实现可视化,以及推出无人驾驶仿真平台 Drive Sim。
元宇宙NPC雏形—— Avatar
据了解,英伟达昨天在GTC大会上最新发布的Omniverse Avatar,进一步坚定了其全面进军元宇宙的决心。Omniverse Avatar是Omniverse 平台下的一款基于语音、计算机视觉、自然语言理解、推荐引擎和模拟方面的技术生成的交互式AI化身,有点类似于现在的游戏世界中提供指引、触发剧情的NPC,延伸至元宇宙的话正是元宇宙世界里NPC的雏形。
Avatar是以3D形式呈现的互动角色,可以说话交谈,并且与使用者就有关主题进行交谈,并理解对话的意图。黄仁勋表示:“Omniverse Avatar结合了英伟达的图像处理、模拟技术和人工智能技术,协作机器人和虚拟助手的具体使用效果令人难以置信,预计将影响深远。”
在GTC大会,英伟达详细解释了Avatar的构造,Avatar的语音识别和生成能力基于英伟达Riva,自然语言理解是基于Megatron 530B大型语言模型,可以识别、理解和生成人类语言。Avatar的推荐引擎由英伟达Merlin提供,该框架允许企业建立能够处理大量数据的深度学习推荐系统,以提出更智能的建议。Avatar的感知能力由NVIDIA Metropolis提供,这是一个用于图像分析的计算机视觉框架。Avatar的头像动画由NVIDIA Video2Face和Audio2Face(二维和三维AI驱动的面部动画和渲染技术)驱动。Omniverse Avatar将这些技术组成一个应用程序,并使用NVIDIA统一计算框架进行实时处理。
开创自动驾驶新生态
4年前英伟达已进军自动驾驶领域,其中在2019年年底,英伟达宣布推出新一代用于自动驾驶和机器人平台的高度先进的软件定义平台——NVIDIA DRIVE AGX Orin,该平台集成170亿晶体管,采用全新的NVIDIA GPU及12核ARM CPU。
黄仁勋在昨日GTC大会上表示:“到2024年,绝大多数新电动车都将具备真正的自动驾驶功能。”
正如前面提到的,英伟达最新推出的DRIVE Hyperion 8,就像是一个集合了各种自动驾驶功能模块的全栈式自动驾驶平台,具备智能感知、规划、高精地图、数据标注等各种超强能力,各种传感器插件均可由客户或车企进行调用,而该平台建立在英伟达的两个NVIDIA Orin系统级芯片的基础上,所有处理均需经过Orin芯片。
传感器插件方面,Drive Hyperion 8 结合了一系列传感器,包括 12 个摄像头、9 个雷达、12 个超声波传感器和一个前置激光雷达,并且整个设置定义为模块化,客户或车企可以按照需求及实际情况进行调控。
在昨日的介绍中,英伟达的虚拟数字世界中加入了自动驾驶高精地图的数字化供应商DEEPMAP的顶尖技术。这家企业正是在2021 年 6 月,英伟达收购的高精地图明星企业 DEEPMAP。这一技术让整个虚拟世界与真实世界几乎一致,并预测同时针对激光雷达和毫米波雷达的采集仿真,英伟达还建立了不同材质库,让采集的数据与真实情况一致。
英伟达推出的这一套体系旨在占领自动驾驶领域更大市场份额,包括让开发乘用车辅助驾驶软件系统的供应商和汽车制造商融入英伟达自动驾驶生态链。
英伟达已经开始接触一些客户,他们正在英伟达的Orin芯片上进行开发工作,其中包括Cruise、梅赛德斯-奔驰以及沃尔沃。
新推出的Drive Concierge则是一个AI自动驾驶语音助理,类似“Siri”,它结合了语音辅助、驾驶员监控和自动停车技术,并且还能够执行从简单到复杂的语音命令。
从自动驾驶的底层核心——芯片,再到自动驾驶传感器和衍生软件平台,英伟达正在打造出全新的以英伟达技术为核心的自动驾驶生态链。
智通财经APP曾报道,特斯拉(TSLA.US)周二暴跌近12%,一定程度上受到了来自英伟达在自动驾驶技术方面的压力。Morningstar的分析师Seth Goldstein表示:“英伟达自动驾驶汽车技术的发布,是周二特斯拉被抛售的一个因素,尽管特斯拉目前在自动驾驶汽车领域处于领先地位,但如果英伟达的技术很好,并且2024年开始出现在其他汽车制造商的汽车中,那么特斯拉将面临更大的竞争。”