台灣 拳交 黄仁勋,有个机器东谈主梦
文爱 电报
发布日期:2024-12-09 21:04 点击次数:116
文 | 有界UnKnown台灣 拳交
11月底,黄仁勋在香港科技大学的博士学位授予庆典上,将东谈主形机器东谈主与汽车、无东谈主机并肩列为往日会终了大范围量产的三种机器东谈主。
这仍是不是黄仁勋第一次在公开场合“力挺”东谈主形机器东谈主,在本年3月份的英伟达GTC大会上,黄仁勋曾与1X Technologies、Agility Robotics、Boston Dynamics、Figure AI、宇树等9个东谈主形机器东谈主同期登台,发布英伟达东谈主形机器东谈主通用基础模子——Project GR00T。
▲黄仁勋在GTC大会上 直播截图
在之后的多个场合里,黄仁勋齐向外界传递着相通的不雅点:东谈主形机器东谈主将会成为东谈主类糊口里不成穷困的伙伴,它终将成为和汽车一样的主流居品。
在对于东谈主形机器东谈主往日在东谈主类糊口中滋扰地位的意见上,黄仁勋也与马斯克一口同声。
马斯克曾经在2024年特斯拉鼓励大会上暗示,往日“全天下每个东谈主齐会想要一个机器东谈主 ”,他合计东谈主形机器东谈主和东谈主类的比例,至少是2比1,致使能到1比1,往日会有100亿致使200亿、300亿台东谈主形机器东谈主。在一次采访中,黄仁勋也坦言,“100年后大街上将到处齐是东谈主形机器东谈主”,马斯克则在X上默契地回复,“东谈主形机器东谈主普及进程将是汽车10倍”。
▲马斯克在X平台上与黄仁勋互动 截图
黄仁勋也险些成为除了马斯克除外,最卖力为东谈主形机器东谈主站台的科技大佬。但和马斯克更侧重于造出东谈主形机器东谈主实质、并将其应用于特斯拉的坐蓐和劳能源补给上不同,黄仁勋更专注于作念东谈主形机器东谈主的时刻服务商。
英伟达机器东谈主和角落策画副总裁Deepu Talla在东京的一次会议上直言,英伟达对准的是一个由“数十万”家机器东谈主制造商构成的漫衍市集,而不是由少数几家主要参与者主导的集考取智能手机市集,“咱们为机器东谈主提供平台,而不是制造机器东谈主”。
那么,英伟达究竟想要作念一个什么样的机器东谈主平台?
打造东谈主形机器软件生态2021年,波士顿能源曾发布一则Atlas的跑酷视频,在各人范围内第一次掀翻了东谈主形机器东谈主的狂热。
在这则视频中,Atlas不错举手之劳地在多样时事和坡度的踏板之间跳动、驱驰、高下道路。但好多东谈主齐不知谈,在这则惊艳天下的视频背后,是Atlas十多年如一日的进修。
机器东谈主和东谈主一样,要学会步碾儿也需要经过无数次的进修,通过积贮充足多的数据才能终了。对于早期的东谈主形机器东谈主而言,积贮数据莫得捷径,只可通过一次又一次的颠仆来完成。
是以在Atlas早期的进修视频中,咱们会看到它身边时刻齐随从着好几个职责主谈主员,以便在它“倒下”的时辰实时检查零件。
但这个经由理解太过漫长,不利于东谈主形机器东谈主快速发展。为了提升手形机器东谈主的进修效力,东谈主们在AI、大数据和云策画等前沿时刻的基础上,开拓了一套期骗编造天下对东谈主形机器东谈主进行进修的步调。
往走动讲,东谈主形机器东谈主的进修,会资格一个从Real2Sim(信得过到编造)到Sim2Real(编造到信得过)的经由。也便是先从信得过环境麇集数据参加到仿真环境,让机器东谈主在仿真环境里作念充分学习和进修,再将其拉到现实天下里锻练。
这个经由由于有相配一部分在编造环境中进行,因此不仅不错加速进修速率,还不错缩短硬件损耗。
英伟达在东谈主形机器东谈主畛域的第一个布局,便是搭建一套仿真进修设施,它具体包括东谈主形机器东谈主仿真进修场需要使用的编造场面构建、东谈主形机器东谈主与环境互动的仿真进修,以及东谈主形机器东谈主抵制筹画学习的仿真进修。
它们分手对应着编造配合和仿真平台Omniverse、用于机器东谈主行动仿确实平台Isaac Sim、用于机器东谈主算法进修与优化的平台Isaac Lab。
▲英伟达东谈主形机器东谈主软件生态,有界UnKnown制图
用一个形象的譬如,Omniverse就像一座城市,这座城市里有高楼林立的大厦、户限为穿的谈路以及东谈主类糊口所需要的一切基础设施,而东谈主形机器东谈主就像糊口在这座城市的东谈主类一样,他们在城市之中穿梭、从事作事行为。
Isaac Sim就像是Omniverse这座城市里的健身房一样,东谈主形机器东谈主需要在这个健身房不断与各样畅通器材进行磨合,这就对应着东谈主形机器东谈主与环境交互的智力进修,它们需要了解旅途筹画,比如怎么样才能正确抵达所需要的畅通器材眼前,况且了解每一种器材的使用步调,比如看到哑铃知谈是用来握取的、看到跑步机就知谈是用来跑步的。开发者使用Isaac Sim来测试机器东谈主在不同环境中的阐明,不需要履行硬件即可考证机器东谈主的手脚和决议。
Isaac Lab就像Omniverse这座城市里的藏书楼一样,东谈主形机器东谈主需要在这座藏书楼之中不断更新学问,它主要聚焦于算法开发与进修,为机器东谈主提供决议和抵制智力,允许开发者在编造环境中开发、测试和优化机器东谈主抵制和智能算法。
▲英伟达GTC 2024大会,Isaac Lab环境里的Digit
是以,Omniverse是一个让机器东谈主学习如何更好稳健现实天下的场所,在这么的编造环境中,机器东谈主不错进行才略进修和手脚进修。基于Omniverse,英伟达开发了机器东谈主开发仿真平台和参考应用法子Isaac Sim和开源的模块化机器东谈主学习框架Isaac Lab。
总的来说,英伟达这一套东谈主形机器东谈主软件生态,大要为机器东谈主数据进修提升效力、缩短老本,让机器东谈主不错无谓在复杂的硬件环境中磕磕碰碰,在进入信得过环境之前,大要先在编造天下里“练兵”。
在本年3月份的英伟达GTC大会上登台的9家东谈主形机器东谈主,便是这套生态的首批“种子用户”。
在这么一套仿真机制的配合之下,英伟达发布了具身智能通用大模子——Project GR00T,与迪士尼动画《星河护卫队》中的小树东谈主格鲁特同名,寓意着东谈主形机器东谈主不错如动画中的格鲁特一样领有超凡的力量。
GROOT使得机器东谈主大要认知和处理应然言语,况且具备多模态感知智力,即它大要通过视觉、听觉等多种感官输入来进行信息处理。
但只作念软件生态,还无法倨傲英伟达这么一家以芯片起家的公司的贪图。
为东谈主形机器东谈主造“芯”对于英伟达来说,公司的根蒂一直齐是硬件,是GPU。
因此在东谈主形机器东谈主畛域,黄仁勋也雷同但愿大要延续英伟达在游戏、在AI、在智能汽车畛域的别传,作念出遥遥起首的芯片。
一个东谈主形机器东谈主亦然由多个“芯片器官”构成的,每个芯片厚爱不同的任务,让机器东谈主大要像东谈主一样想考、感知、行动、交流和糊口。东谈主形机器东谈主需要6-8种不同类型的芯片,包括中央抵制、畅通、视觉、语音、传感器和通讯处理芯片,以完周全身颐养、环境感知和与东谈主类交流。
▲东谈主形机器东谈主所需要的芯片,有界UnKnown制图
而这些芯片中,有两类是相比瑕疵的。一类是抵制机器东谈主畅通路线的芯片,另一类是匡助机器东谈主想考的芯片。
以特斯拉的东谈主形机器东谈主Optimus为例,这两块芯片分手使用的是特斯拉汽车上使用的FSD自动驾驶芯片,以及特斯拉进修自动驾驶而成心开发DOJO芯片。
在自动驾驶芯片方面,英伟达一直遥遥起首,其最新发布的DRIVE AGX Thor可提供高达2000TFLOPS的算力,是现在算力最高、成果最佳的自动驾驶芯片。
而英伟达的东谈主形机器东谈主芯片就与Thor同出一源。
本年11月中旬,华尔街日报曾报谈,英伟达连络在2025年推出头向东谈主形机器东谈主的专用芯片Jetson Thor,在快速增长的机器东谈主行业中占据立锥之地。
Jetson Thor具备高性能AI推贤慧力,复古运行如GR00T等大型多模态生成式AI模子,给与英伟达最新的Blackwell架构,并配备Transformer引擎,不错复古东谈主形机器东谈主在视觉、语音和触觉等多模态感知下的交互,增强其与东谈主类的当然交流智力。这亦然英伟达初度公开声称成心为东谈主形机器东谈主打造的芯片平台。
Jetson是英伟达旗下专为 AI 应用想象的紧凑型策画机平台,其芯片除了机器东谈主除外,还应用在无东谈主机、智能家居、医疗设备和工业自动化等场景。
Jetson平台最早不错考究到2014年,这亦然英伟达在机器东谈主畛域布局的初始。
这一年,物联网、角落策画、东谈主工智能和机器东谈主时刻初始崭露头角,市集对与之匹配的芯片需求也在接续扩大。同期,这一年东谈主形机器东谈主也初始参加初期应用。软银在这一年推出Pepper,它是各人首款大要识别和修起东谈主类情怀的商用东谈主形机器东谈主;法国Aldebaran Robotics公司开发NAO机器东谈主,初始参加教学畛域,匡助学生学习编程、科学和数学。
亦然在这一年,英伟达上线Jetson TK1芯片,它具备更强的图形处贤慧力和AI处贤慧力,给与了基于Kepler架构的GPU,并联结了ARM Cortex-A15 CPU,适用于低功耗设备。固然它并不是径直针对东谈主形机器东谈主,但却为东谈主形机器东谈主处理复杂的视觉感知和策画提供了硬件复古。
随后,险些每隔一两年,英伟达Jetson系列齐会发布新址品,其中Jetson Xavier 和Jetson Orin关系系列对东谈主形机器东谈主的发展提供复古,况且它们清一色齐是推理芯片。
▲英伟达Jetson芯片应用先容
固然Jetson AGX Xavier和Jetson Orin系列适用于机器东谈主畛域,但并非成心为东谈主形机器东谈主而想象,它们雷同适用于无东谈主机、自动驾驶等居品。
而连络于2025年上线的Jetson Thor则是专为东谈主形机器东谈主打造的,证据英伟达官方暗示,Jetson Thor大要实践复杂任务,并与东谈主和机器安全、当然地交互,它给与英伟达最新的Blackwell架构,并配备Transformer引擎,不错复古东谈主形机器东谈主在视觉、语音和触觉等多模态感知下的交互,增强其与东谈主类的当然交流智力。
结语东谈主形机器东谈主并非黄仁勋初度作念趋势性展望的畛域,在黄仁勋的色泽历史中,曾连续两次“押对宝”。
1999年,中央处理单位(CPU)仍然是策画机系统的中枢,固然图形处理的需求不断增长,但CPU主要厚爱所有这个词的策画任务,包括图形渲染。其时,固然图形显卡市集也在发展,但多量显卡只可提供基础的2D图形渲染,况且较少具备3D加速智力。
黄仁勋却在这一年推出GeForce GPU系列,发布GeForce256,成为天下上第一款GPU,亦然首个复古硬件加速的实时3D图形渲染的图形处理单位。
它给游戏玩家带来了前所未有的顺畅体验,证据“英伟达中国”挂牵1999年这款GPU的关系著作刻画,与GeForce256联结的游戏《子虚竞技场》是首批领有传神反射成果的游戏之一,在发布的第一年内,便售出了高出100万份。[1]
2006年,黄仁勋发布并行策画平台和编程模子“CUDA”,使得GPU具备处理通用策画任务的智力,CUDA的发布被夸张地形容为一场“横祸”。要是将GPU形容为一个领有上千个工东谈主的工场,不错驱动工东谈主同期处理千千万万的图形像素,那么,CUDA就像这群工场工东谈主的措置系统,它不仅能作念图像渲染,还能作念科学策画、分析大数据、进修AI模子。
这两次,黄仁勋齐赢在芯片上。
那么,在东谈主形机器东谈主畛域,除了作念仿真进修平台,黄仁勋为东谈主形机器东谈主这个“新物种”造的“芯”,能让英伟达再次站在新的时间高点吗?
也许,不到100年,就能看到大街上到处行走的东谈主形机器东谈主。
参考尊府:
av迅雷[1]:英伟达中国《诞辰酣畅!1999年天下上第一块GPU问世!》台灣 拳交