Lensin Dubaihin työskentelemään $CODEC tiimin kanssa henkilökohtaisesti. Robotiikka tulee olemaan liian suuri ala, jotta siihen ei menisi täysillä. Opiskele työskentelyä laukkujesi eteen.

Pilvipohjaisen SDK:n merkitys robotiikassa ei ehkä kuulosta räikeältä, mutta se on ehdottoman tärkeää alan edistämiseksi. Jos olet teknologiapiireissä, kuulet päivittäin pilvialustoista, jotka harvoin herättävät mielikuvitusta. Humanoidiroboteille ja fyysisen maailman operaattoreille pilvisimulaatiotyökalupakki on kuitenkin keskeinen välttämättömyys jokaiselle kehittäjälle, joka yrittää skaalata koulutustaan. Tarkat virtuaalimaailman simulaatiot ovat yksi robotiikan halutuimmista hyödykkeistä tällä hetkellä. Tutkijat suorittavat loputtomasti kokeita selvittääkseen, mitkä todellisen ja synteettisen datan yhdistelmät tuottavat tarkimmat tulokset harjoitustehtävissä Kyllä, Teslan kaltaisilla yrityksillä on valtava etumatka kalustoistaan keräämiensä neuroverkkotietojen ansiosta, vaikka nämä tiedot ovat vain raakatietoa, kunnes ne otetaan käyttöön realististen koulutussimulaatioiden avulla. Kaikille muille tämän tason datan tai edes laitteiston hankkiminen sen virransyöttöön ei vain ole vaihtoehto, ellet ole massiivisesti rahoitettu yritys. Tässä kohtaa pilvisimulaatio astuu kuvaan. Siirtämällä robottien koulutuksen ja testauksen pilvipohjaisiin virtuaaliympäristöihin kuka tahansa voi käyttää tarvittavaa laskentaa ja skaalausta. Pilvialusta voi keskittää näiden simulaatioiden, tulosten ja tietojen jakamisen. Käytännössä abstraktit pois suljetut ovet, joihin näillä miljardin dollarin yrityksillä on pääsy, laboratorioissa käytetyt laajat laitteistokomponentit ja tuot tietoaineistot julkisuuteen, jossa avoimen lähdekoodin panoksesta tulee yleinen +EV innovaatioille. Tämä liiketoimintamalli on jo osoittanut toimivuutensa, kun Hugging Facen LeRobot (avoimen lähdekoodin aloite) tekee yhteistyötä Nvidian kanssa yhdistääkseen kehyksensä, jotta tutkijat voivat jakaa malleja, tietojoukkoja ja simulaatioympäristöjä pilvessä. Lopullisena tavoitteena on luoda datan vauhtipyörä, kun ihmiset tuovat simulaatiodataa ja koulutettuja käytäntöjä arkistojen avaamiseen, se nopeuttaa muiden edistymistä ja tuottaa puolestaan maailmanlaajuisesti saatavilla olevaa dataa. Tähän kanavoidaan paljon työtä kuromalla umpeen "sim to real" -kuilua. Simulaattorit eivät usein vastanneet todellisuutta, robotit oppivat virtuaalimaailmassa käyttäytymistä, joka ei siirtynyt todelliseen maailmaan, koska fysiikka tai visuaalinen ilme ei ollut tarpeeksi tarkka. Tämä ero on nyt kaventumassa nopeasti paremman simulaatiotarkkuuden ja hybridikoulutusmenetelmien ansiosta. Suurin osa robotiikan uusimmista perusmalleista (kuten NVIDIAn Isaac GROOT ja Figuren Helix VLA) käyttävät kaksoisjärjestelmäarkkitehtuuria, joka jäljittelee ihmisen kognitiota. Sama pätee siihen, miten he kouluttavat dataa maailman simulaatioissa. Yksi osa mallista on koulutettu todellisen maailman ihmisen esittelydatalla, kun taas toinen osa on koulutettu valtavaan määrään synteettistä dataa, joka on tuotettu korkealaatuisten simulaattoreiden avulla. Yhdistämällä fyysistä ja simuloitua harjoittelua malli oppii tarkkoja taitoja, jotka yleistyvät paremmin. Todellinen data tarjoaa totuuden tekoälyssä, kun taas simuloitu data tarjoaa mittakaavaa ja vaihtelua, jota on epäkäytännöllistä kerätä fyysisessä maailmassa. Kehittäjät voivat jopa hienosäätää tai lähettää harjoitusmalleja todellisilla tai synteettisillä lisätiedoilla tiettyjä tehtäviä varten, mikä tekee koulutusputkesta erittäin joustavan. Kuvat Helix VLA, joka käyttää System 1/System 2 -lähestymistapaa, on koulutettu vain sadoilla etäkäyttöisillä tunneilla (täydennettynä simulaatiolla ja älykkäillä merkinnöillä), Helix pystyy käsittelemään uusia kotitöitä luonnollisella kielellä ilman mukautettua koodausta. Osoittaa, kuinka multimodaaliset mallit ja synteettinen koulutus vähentävät datatarpeita dramaattisesti. @codecopenflow soveltaa samaa periaatetta Octoon, Optr SDK:hen integroituun avoimeen VLA:han, joka mahdollistaa usean kameran havainnoinnin ja kieliohjatun ohjauksen paljon pienemmillä tietojoukoilla ja pienemmällä laskennalla. Maailman simulaatioalustat tuottavat nyt valtavia määriä monipuolista koulutusdataa, jota ei yksinkertaisesti ollut aiemmin saatavilla. Nvidian Isaac Sim (osa Isaac Labia) voi ottaa yhden ihmisen esityksen tehtävästä ja pyörittää sen tuhansiksi simuloiduiksi muunnelmiksi käyttämällä rinnakkaisia pilviinstansseja. Kuvittele, että näytät robotille, kuinka yksi laatikko poimitaan todellisuudessa, ja sitten simulaattori luo lukemattomia skenaarioita erilaisilla laatikoilla, valaistusolosuhteilla ja pienillä fysiikan hienosäädöillä, jotka kaikki tuottavat koulutuskokemuksia, joista robotti voi oppia. Visio, jonka eteen @unmoyai työskentelee kovasti. Siihen mennessä, kun tämä taito otetaan käyttöön fyysisessä robotissa, se on todistettu suurissa määrissä virtuaalisia kokeita. Yhdistämällä nämä rikkaat synteettiset tietojoukot juuri ja juuri tarpeeksi reaalimaailman kalibrointitietoihin saadaan paljon tarkempia ja kestävämpiä robottiaivoja. Tätä varten Codecin pilvi-SDK on sijoitettu antamalla käyttäjien sekä vetää suurista avoimen lähdekoodin tietojoukoista että osallistua niihin (esimerkiksi liittymällä Hugging Facen LeRobot-keskukseen). Jokaisesta pilvessä suoritettavasta simulaatiosta voi tulla uutta koulutusdataa, joka terävöittää globaalia mallia siitä, miten robotit ovat vuorovaikutuksessa maailman kanssa. Kaikki palaset viittaavat siihen, että humanoidi ja robotit yleensä lähestyvät "App Store -hetkeä". Robottilaitteisto on hyödytön ilman taitokirjastoa. Optr tarjoaa yhtenäisen API:n, jotta verkkosovellusta ohjaava autonominen agentti, robottikäsi tai simuloitu avatar käyttää samaa ydinkehystä ja logiikkaa. Tämä abstraktio on dynaaminen, koska kehittäjät voivat tehdä tehtävän prototyypin pelin kaltaisessa simulaatioympäristössä ja ottaa sitten saman logiikan käyttöön oikeassa robotissa minimaalisilla muutoksilla. Koska Optr SDK on pilvipohjainen ja avoin, se voi toimia robotiikan markkinapaikan perustana. Kehittäjät voivat rakentaa uuden taidon omistamatta robottia (pilvisimulaation ansiosta), testata sitä turvallisesti virtuaaliympäristöissä ja julkaista sen sitten muille. Ne, jotka tarvitsevat taitoa, kuten robotiikan startup tai henkilö, jolla on kotirobotti, voivat vetää sen kirjastosta ja käyttää sitä koneillaan. Tällainen avoin markkinapaikka ja kannustinmalli on robotiikan kehittäjätalouden sulake. Se alentaa markkinoille pääsyn kynnystä (pilvityökalujen vuoksi ei tarvita kalliita laitteita tai laboratorioita), se kannustaa yhteistyöhön, koska panokset parantavat jaettuja tietojoukkoja ja malleja ja tarjoavat yksilöille taloudellista motivaatiota ratkaista niche-ongelmia. Tästä syntyy monia tuotantoketjun loppupään taloudellisia vauhtipyörämahdollisuuksia (jotka voit nähdä viimeaikaisista kumppanuuksista), mutta säästän sen erilliseen kirjoitukseen.

Joka päivä näemme miljardin dollarin otsikoita robotiikasta. Vain 12 kuukautta sitten nämä yritykset ja luvut olivat 10-20 kertaa alhaisemmat. Jos ei ole jo huolellisen selvää, kuinka menestyvä tämä ala tulee olemaan, omista viikonloppu tutkimukselle, jotta et jää jälkeen. Historia osoittaa, että suurin arvo teknologia-aalloissa kertyy usein mahdollistaville kerroksille, Microsoftille PC:ssä, Applelle älypuhelimissa ja AWS:lle pilvessä. Robotiikka ei ole erilainen, infrakerros, jolle kehittäjät rakentavat, tallentaa enemmän kuin mikään yksittäinen laitteistopeli. Yksi yleinen teema, jonka kuulen ystäviltäni, on se, että he ovat huolissaan siitä, että he eivät altistu riittävästi perinteiselle robotiikalle. Kyllä, tulee olemaan mielettömiä otsikoita siitä, että Figure AI tekee 200-kertaisen siemenarvostuksesta tai vastaavasta. Mutta jos olet alle 7 viikunan puolivälissä, Web2 ei ole siellä, missä haluat olla (ellei sinulla ole mieletöntä tietoa/yhteyksiä). Kerta toisensa jälkeen krypto on tarjonnut epäsymmetrisimmän ja mikä tärkeintä, kiihtyneen nousun. Riski on huomattavasti suurempi, mutta siihen liittyy myös se ylellisyys, että se ei ole ajan karu, mikä on joskus pahempaa sinänsä. Nvidia on maailman suurin osake tekoälyn kiihtyvyyden vuoksi. Olisitko mieluummin lyönyt vetoa ai16z:stä, Virtualsista, AIXBT:stä ja GOATista heidän ensimmäisessä osaottelussaan vai metsästänyt aliarvostettuja "perustavanlaatuisia tekoälypelejä" Robinhoodissa? Olisit ehkä pitänyt enemmän rahaa pitkällä aikavälillä, mutta olemme täällä unen riistämiseksi uPNL:ltä, eikö niin? Kuten tekoälyn alkuvuorossa, meille on annettu hyvin erityinen hetki, jolloin teknologisten innovaatioiden huippu tuijottaa meitä kuolleena kasvoihin. Se, miten navigoit sen etenemisessä, heijastaa ymmärrystäsi markkinoiden perusteista ja ihmisen ahneudesta. Aivan kuten tekoäly, kohtaamme loputtomasti vaporware-ohjelmia, kun siirrymme lähemmäksi yleiskäyttöisiä robotteja. Niille, jotka ovat valmiita heittämään noppaa ja nappaamaan johtajat, voit tehdä ylisuuria kertoimia, jotka saavat Andrew Kangin siemensijoitukset näyttämään pieniltä. Tiedän, mitä peliä pelaan.