F'GTC Taipei u Computex illum, NVIDIA Corp. żvelat diversi ħiliet u għodod fiżiċi ta'-sors miftuħin tal-AI biex jgħinu lill-iżviluppaturi tar-robotika, vetturi awtonomi, AI viżwali, u tewmin diġitali industrijali. Il-kumpanija sostniet li jistgħu jgħinu biex jitnaqqsu l-ispejjeż, il-ħin u l-kumplessità tal-bini ta’ flussi tax-xogħol fiżiċi tal-AI fuq skala kbira.
Disponibbli bħala parti mill-NVIDIA aġent Toolkit, il-ħiliet il-ġodda se jħallu lill-aġenti tal-AI jħaffu l-ġenerazzjoni tad-dejta, is-simulazzjoni, it-taħriġ, l-evalwazzjoni u l-pipelines tal-iskjerament wara robots, vetturi awtonomi (AVs), fabbriki, u laboratorji, qalet il-kumpanija.
"L-aġenti tal-AI qed jirrevoluzzjonaw l-iżvilupp tas-softwer, u dik il-bidla issa qed tasal għall-AI fiżika, li testendi fis-sistemi li se jittrasformaw it-trasport, il-manifattura, il-kura tas-saħħa u r-robotika," qal Jensen Huang, fundatur u CEO ta 'NVIDIA, f'GTC Taipei. "Meta l-aġenti jistgħu jużaw direttament il-libreriji, il-mudelli u l-oqfsa NVIDIA, l-iżvilupp fiżiku tal-AI se jimxi aktar malajr, li jippermetti lill-iżviluppaturi jibnu r-robots, vetturi awtonomi, u sistemi industrijali tal-futur b'pass inkredibbli."
"L-AI fiżika teħtieġ ammonti kbar ta 'dejta ta' taħriġ f'ambjenti diversi," innota Rev Lebaredian, viċi president għas-simulazzjoni fiżika tal-AI f'NVIDIA. "Teleoperazzjoni, simulazzjoni, u dejta tal-internet-skala twassal għal mudelli ta' bażi dinjija għal diversità infinita ta' każijiet ta' użu."
NVIDIA jagħmel l-aġent tal-munzell AI fiżiku-lest
NVIDIA qalet li qed tottimizza l-munzell tal-AI fiżiku kollu tagħha għall-aġenti billi ddawwar il-libreriji, il-mudelli, u l-oqfsa f'għodda ta' aġent-sejħabbli. Dan jinkludi:
NVIDIA Cosmos3 mudelli tal-pedament tad-dinja għar-raġunament u l-ġenerazzjoni fiżika tad-dinja
NVIDIA Omniverselibreriji għas-simulazzjoni u tewmin diġitali
NVIDIA Isaacgħas-simulazzjoni tar-robotika u t-tagħlim tar-robot
NVIDIA Metropolisgħall-viżjoni AI
NVIDIA Alpamayogħalsewqan awtonomu
NVIDIA Jetsonpjattaforma għall-iżvilupp tarf AI
"Cosmos 3 huwa l-mudell tal-pedament tal-fruntiera għall-AI fiżika," qal Lebaredian. "Jifhem vidjows u test u jista 'jindika dak li huwa importanti. Cosmos hija simulazzjoni fiżikament preċiża u kapaċi tbassar x'jiġri wara u tiġġenera azzjonijiet."
Biex tgħin fl-applikazzjoni ta 'dawn l-għodod, NVIDIA qed tniediħiliet ġoddabiex jibdlu l-proċessi fiżiċi tal-iżvilupp tal-AI fi struzzjonijiet ripetibbli li l-aġenti tal-kodifikazzjoni jistgħu jsegwu. Dan jinkludi liema għodod issejjaħ, liema outputs għandhom jipproduċu, u kif l-iżviluppaturi jistgħu jivvalidaw ir-riżultati.
L-iżviluppaturi jistgħu wkoll jibnu u jużaw aġenti awtonomi b'mod sikur billi jużaw dawn il-ħiliet mal-NVIDIA NemoClawblueprint u l-NVIDIA OpenShellruntime, li jipprovdi politika-ibbażata fuq is-sigurtà u l-governanza tal-privatezza fuq hardware lokali jew cloud. L-aġenti se jimxu fit-tarf f'Jetson u diġà wrew titjib fl-uptime, qal Lebaredian.
NVIDIA qalet li l-ħiliet u l-għodod fiżiċi tagħha tal-AI qed jaċċelleraw l-iżvilupp aġent madwar:
Robotika u AI tat-tarf:L-iżviluppaturi tar-robot jistgħu jużaw il-ħiliet biex jaċċelleraw il-pipeline kollu tal-iżvilupp tar-robotika, mill-ġenerazzjoni tad-dejta dwar it-taħriġ tal-perċezzjoni u l-mobilità sa simulazzjoni, awtomatizzazzjoni tat-taħriġ tan-navigazzjoni, avvanz tat-tagħlim tar-robot, u rfinar tas-sistemi edge bbażati fuq Jetson-għall-iskjerament.
Vetturi awtonomi:Għall-iżviluppaturi AV, il-ħiliet jistgħu jidderieġu lill-aġenti biex jibnu mill-ġdid id-dejta maqbuda mill-flotot f'ambjenti ta' simulazzjoni, jiġġeneraw xenarji ta' sewqan fotorealistiċi fuq skala, u jmexxu tagħlim ta' rinfurzar ta' ċirku{0}}magħluq biex jespandu l-kopertura tat-taħriġ u l-evalwazzjoni.
Aġenti tal-IA b'viżjoni-ħin reali:Għall-ispezzjoni awtomatizzata u l-intelliġenza tal-vidjo, NVIDIA qalet li l-ħiliet tal-aġenti tagħha jistgħu jgħinu lit-timijiet jiġġeneraw data ta’ taħriġ sintetiku, jirfinaw-mudelli, awtomatizzaw it-tikkettar, u jibnu aġenti tal-AI tal-vidjo li jfittxu, jiġbru fil-qosor u janalizzaw vidjow dirett jew irreġistrat.
AI industrijali:L-iżviluppaturi ta' softwer industrijali jistgħu jużaw dawn il-ħiliet biex jikkonvertu d-dejta tal-inġinerija f'assi tal-kompjuter-disinn assistit (CAD) għal simulazzjoni ta' tewmin diġitali, billi jottimizzaw xeni OpenUSD kbar b'inqas setup manwali.
Kura tas-saħħa:Qabel ma jħaddmu l-awtomazzjoni f'ambjenti kliniċi, it-timijiet tal-kura tas-saħħa jistgħu jiggwidaw lill-aġenti permezz tal-ħolqien ta' tewmin diġitali ta' ambjenti ta' sptar, sim-għal-ġenerazzjoni ta' data reali, u softwer-in-il--ittestjar tal-politika.
Il-ħiliet jistgħu jiġu kkombinati u integrati f'sistemi aġent akbar, skont NVIDIA. Dan jippermetti lill-iżviluppaturi biex orkestraw u awtomatizzati flussi tax-xogħol kumplessi bħall-ġenerazzjoni tad-dejta, is-simulazzjoni, l-ottimizzazzjoni, l-irfinar tal-inferenza, l-evalwazzjoni kontinwa, u aktar.
L-iżviluppaturi tar-robotika jtellgħu l-munzell fiżiku tal-AI
1X Teknoloġiji, Agile Robots, Agility, FieldAI, Hexagon Robotics, NEURA Robotics, Skild AI, u Universal Robots huma fost il-kumpaniji tar-robotika li diġà qed jużaw l-aġent-lest fiżiku AI stack ta' NVIDIA.
"Bl-aġġornamenti tal-munzell f'NVIDIA Isaac GR00T, flussi tax-xogħol ġodda minn tarf-sa- jistgħu jiġu stabbiliti f'sigħat kontra ġimgħat," qal Lebaredian. "'Omni-modali' tfisser li taħdem b'modi differenti - vidjo, sensuri, test, u ħoss għal inputs u outputs ta' azzjoni."
Barra minn hekk, Foxconn u Compal qed jużaw NVIDIA Isaac għall-Kura tas-Saħħa biex jaċċelleraw ir-robotika tal-isptar. Compal qed tavvanza l-proċess ta' żvilupp tar-robot PolyMedX tagħha lejn sptar-pjattaforma ta' orkestrazzjoni wiesgħa, li tintegra s-simulazzjoni, l-AI u l-operazzjonijiet tad-dinja reali-.
Foxconn qed ikabbar Nurabot f'diversi sptarijiet u ambjenti ta' kura fit-tul-, u jġib ir-robotika mħaddma bl-AI- għall-kura tal-pazjent, kif ukoll qed jintroduċi Scrub Nurse Collaborative Robot il-ġdid tiegħu biex jgħin jottimizza l-flussi tax-xogħol tal-kamra tal-operazzjoni.
Il-mexxejja tal-industrija jibnu bit-teknoloġiji NVIDIA
L-imsieħba u l-klijenti NVIDIA madwar is-softwer tal-manifattura, it-trasport, il-kura tas-saħħa u industrijali qed jużaw il-libreriji fiżiċi tal-AI tagħhom biex javvanzaw l-iżvilupp ta’ sistemi awtonomi u AI industrijali.
Hekk kif dawn il-libreriji jsiru aġent-lesti, l-iżviluppaturi jistgħu jużaw il-ħiliet NVIDIA biex jgħinu lill-aġenti awtomatizzati s-setup, l-eżekuzzjoni u l-iterazzjoni fuq flussi tax-xogħol fiżiċi kumplessi tal-AI.
Fil-manifattura tal-elettronika, TSMC u Pegatron qed jirfinaw-mudelli ta' spezzjoni viżwali. Allegatament, Pegatron naqqas it-taħriġ tal-mudell u l-ħin tal-iskjerament b'67% bl-użu ta' data sintetika ġġenerata mill-ħila tal-Ġenerazzjoni tal-Immaġni tad-Difetti.
Delta Electronics ġġenerat data ta 'difetti sintetiċi u użat il-ħila biex taqbad l-issaldjar żejjed fuq busbars tal-metall, u tejbet ir-rata ta' skoperta bi 17%. Inventec żviluppat il-pipeline ta 'spezzjoni viżwali ta' l-Aġent ta 'Osservazzjoni billi jintegra l-ħila tal-Ġenerazzjoni ta' l-Immaġni tad-Difetti, u naqqas l-isforz tal-ġbir tad-dejta tad-difetti għall-manifattura tax-chassis tal-laptop bi 30%.
Foxconn, li qed jaħdem ma' DeepHow, uża l-ħila biex ittejjeb l-effiċjenza tal-manifattura billi qabad l-iżbalji kmieni, u żiedet ir-rendiment tal-ewwel pass b'madwar 3%.
Fl-AI industrijali, Cadence, Dassault Systèmes, Siemens u Synopsys qed jużaw libreriji u ħiliet NVIDIA Omniverse għall-ispezzjoni tad-dejta tal-inġinerija, simulazzjoni, u tewmin diġitali interattivi. PTC, MetAI u Lightwheel qed jisfruttaw il-qafas NVIDIA Isaac Sim u l-flussi tax-xogħol ibbażati fuq OpenUSD-biex jittrasformaw id-dejta CAD f'assi u ambjenti lesti għas-simulazzjoni-.
Bħala parti mill-pjan direzzjonali "Autonomous Fab 2030", SK hynix qed timplimenta tewmin diġitali fab semikondutturi bl-użu ta' NVIDIA Omniverse. Iċ-ċippmaker qed jikkollabora wkoll ma' NVIDIA u SK Telecom biex jivvalida NVIDIA Agent Toolkit għall-manifattura-AI fiżika speċifika.
L-iżviluppaturi li jsuqu waħedhom-Li Auto, Afari, u DeepRoute.ai qed jużaw mudelli NVIDIA Omniverse NuRec għar-rikostruzzjoni u l-għoti ta' xena newrali. Huma ġġeneraw aktar minn 1,000 rikostruzzjoni u aktar minn 300,000 rendering u simulazzjoni kuljum.
Barra minn hekk, il-kumpaniji AV qed jużaw ir-repożitorju l-ġdid tal-ħiliet tal-aġenti biex jaċċelleraw u jtejbu l-iżvilupp tagħhom ta 'sistemi ta' sewqan awtonomu aktar siguri u aktar kapaċi. Foxconn, VinFast, Uber, u HUMAIN ingħaqdu mal-ekosistema NVIDIA DRIVE Hyperion biex jiżviluppaw u jużaw robotaxis SAE Livell 4.
Alpamayo 2 Super diġà ġie mniżżel aktar minn 500,000 darba u kien imsemmi "L-Aħjar Teknoloġija" f'Computex, qal Spencer Huang, direttur tal-prodott għar-robotika f'NVIDIA.
Għodod tal-aġent tal-AI fiżiċi issa huma disponibbli
NVIDIA qalet li l-għodod u l-ħiliet tal-aġent tal-AI fiżiċi tagħha huma disponibbli permezzGitHubuħiliet.shgħall-użu ma 'kwalunkwe aġent ta' kodifikazzjoni.
Ħiliet u għodod ta' aġent għall-ġenerazzjoni ta' data sintetika -Rikostruzzjoni newrali, Awment tal-Vidjo, Ġenerazzjoni tal-Immaġni tad-Difett- huma wkoll disponibbli fuq NVIDIA Brev bħalaTnedija tal-AI Fiżiċi, ambjenti kkonfigurati minn qabel li jgħaqqdu l-ħiliet u l-għodod tal-aġenti għal ġenerazzjoni u evalwazzjoni ta' data sintetika aktar mgħaġġla.
Microsoft,CoreWeave, uNebiusqed jintegraw dawn il-ħiliet u l-għodod tal-aġenti mas-servizzi tal-cloud tagħhom biex jippermettu lill-iżviluppaturi jissimplifikaw u jiskalaw il-ġenerazzjoni u l-iskjerament tad-dejta sintetika.
Unitree humanoid ir-referenza għal NVIDIA Isaac GR00T
NVIDIA ħabbret ukoll l-NVIDIA Isaac GR00T Reference Humanoid Robot, disinn ta 'referenza ta' robot umanojdi miftuħ mibni fuq NVIDIA Jetson Thor u l-pjattaforma ta 'żvilupp NVIDIA Isaac GR00T. Il-kumpanija qalet li dan se jgħin biex jiġi demokratizzat l-aċċess għal ħardwer u softwer avvanzat mingħajr ma jkunu jeħtieġu pjattaformi għaljin u proprjetarji bħala interess f'umanojdi għal skopijiet ġenerali-żidiet.
NVIDIA għaqqad korp ta' robot ta'-daqs sħiħ b'manipulazzjoni, sensing, kontroll, u komputazzjoni AI abbord:
Chassis umanojdi Unitree H2,wieqfa kważi 6 pied (1.8 m) għoli u jiżen 150 lb (68 kg), b'31 grad ta' libertà għall-ittestjar fuq skala umana-.
DoppjuSharpa Waveidejn ta' ħames-swaba',li tippermetti manipulazzjoni destrezza bi 22 grad ta 'libertà u li ġġib ir-robot għal 75 grad ta' libertà madwar il-ġisem u l-idejn.
Sensing multi-vista,inkluża ras-kamera stereo immuntata b'kamp viżiv wiesa' (140 grad orizzontali, 102 grad vertikali), kameras tal-polz għall-manipulazzjoni mill-qrib-u unità ta' kejl tal-inerzja għall-intraċċar tal-moviment.
Kontroll tal--ġisem kollu,b'torque tad-driegħ sa 120 Newton-metru, torque tar-riġlejn sa 360 Newton-metru, tagħbija nominali tad-driegħ ratata ta '7 kg (15.4 lb.) u tagħbija massima ta' 15 kg (33 lb.), li tiftaħ irfigħ u jilħaq aktar kapaċi.
Kompjuter abbord NVIDIA Jetson AGX Thor T5000,li fiha GPU NVIDIA Blackwell b'2,070 teraflops FP4 ta 'prestazzjoni AI, CPU Arm ta' 14-qalba, 128GB ta 'memorja unifikata u firxa ta' qawwa konfigurabbli minn 40 sa 130 watt għall-ipproċessar tas-sensuri f'ħin reali u inferenza tar-robot.
Konnettivitàmadwar Ethernet, Wi-Fi 6, Bluetooth 5.2, USB u firxa ta' mikrofoni u kelliema għall-interazzjoni bil-vuċi.
Batterija għal tħaddim estiż,b'kapaċità ta '15Ah, 0.972kWh u madwar tliet sigħat ta' ħajja.
Fuq-waqfien ta' emerġenza mill-bogħodfunzjoni biex tneħħi malajr ir-robot b'mod sikur.
Il-pjattaforma Isaac GR00T tinkludi:
NVIDIA Isaac Teleopbiex taqbad dejta ta' dimostrazzjoni ta' robot ta'-kwalità għolja għat-taħriġ u l-iżvilupp tal-politika.
Mudelli ta 'pedament miftuħ NVIDIA Isaac GR00Tbiex tappoġġja r-raġunament umanojdi, it-tagħlim u l-imġieba multitask.
NVIDIA Isaac Sim uIsaac Labbiex tissimula, tħarreġ, tittestja u tevalwa l-politiki tar-robot qabel l-iskjerament fid-dinja reali-.
Middleware NVIDIA Isaac ROS aċċelleratbiex tmexxi politiki mħarrġa fuq robots.
NVIDIA Jetson Thorbiex taħdem-ħin reali, fuq-inferenza u kontroll tar-robot.
Is-sistema hija ddisinjata biex tkun modulari, sabiex it-timijiet tar-robotika jistgħu jużaw il-pjattaforma sħiħa jew jintegraw kapaċitajiet magħżula f'pipelines ta 'żvilupp eżistenti, u tgħinhom iżidu l-iżvilupp umanojdi mingħajr ma jerġgħu jibnu l-istess infrastruttura għal kull robot jew kompitu.
Istituzzjonijiet ta 'riċerka ewlenin inklużi Ai2, ETH Zurich, Stanford Robotics Center, u UC San Diego's Advanced Robotics and Controls Laboratory jippjanaw li jużaw dan id-disinn ta' referenza biex javvanzaw ir-riċerka tar-robotika umanojde.
"Biex isir progress lejn robots ta'-skop ġenerali, ir-riċerkaturi jeħtieġu pjattaformi li huma kemm kapaċi kif ukoll aċċessibbli b'mod wiesa'," qal Deepak Pathak, ko-fundatur u CEO ta' Skild AI. "Disinn ta 'referenza jippermetti lil aktar riċerkaturi jipparteċipaw f'riċerka umanojde tal-fruntiera u jimxu minn ideat għal esperimenti aktar malajr. Dan jgħin biex jimbotta l-ekosistema sħiħa tar-riċerka tar-robotika 'l quddiem."