Mi az OpenMind alkalmazáskészítője és hogyan működik?

Openmind olyan eszközöket fejleszt, amelyek célja az autonóm gépekhez való szoftverfejlesztés összetettségének csökkentése. Ennek a törekvésnek a középpontjában az OM1 áll, egy nyílt forráskódú operációs rendszer, amelyet robotok és más intelligens eszközök számára terveztek. A vállalat gyakran Android-stílusú robotikai platformként írja le az OM1-et, ami egy megosztott futtatókörnyezetet jelent, amely absztrahálja a hardveres különbségeket, miközben lehetővé teszi a fejlesztők számára, hogy a viselkedésre és a logikára összpontosítsanak.

Az OpenMind nemrégiben bemutatta a OpenMind alkalmazáskészítő, egy vizuális konfigurációs eszköz a fejlesztői portáljukon, amely lehetővé teszi a fejlesztők számára, hogy robotalkalmazásokat hozzanak létre, módosítsanak és telepítsenek anélkül, hogy kódot kellene írniuk a gyakori feladatokhoz. A bejelentést, amelyet a vállalat hivatalos X fiókján keresztül tettek közzé, egy rövid bemutató videó kísérte, amely bemutatta a terméket használat közben.

Ez a cikk elmagyarázza, mi az OpenMind App Builder, hogyan működik technikai szinten, és hol helyezkedik el a tágabb OM1 ökoszisztémában.

Mi az OpenMind tágabb küldetése?

Az OpenMind célja, hogy megosztott szabványok és moduláris szoftverek segítségével lehetővé tegye az autonóm gépek működését. Az OM1 MIT licenc alatt működik, és nyíltan fejlesztik a GitHubon, ahol több ezer sztárt és közösségi közreműködést vonzott. A futtatókörnyezetet úgy tervezték, hogy széles körű robotokat támogassa, beleértve a humanoidokat, a négylábúakat, mint például az Unitree Go sorozat, és a mobil kutatási platformokat, mint például a TurtleBot.

A Pi Network Ventures által támogatott vállalat A Fabric Foundation egyik fő munkatársa is, amely szervezet az autonóm gépek koordinációjára és a láncon belüli identitásra vonatkozó szabványokra összpontosít. A Fabric olyan specifikációkat támogat, mint az ERC 7777, amely meghatározza, hogyan lehet leírni és cserélni a robotok viselkedését. Az App Builder praktikus interfészként szolgál ezekre az alapul szolgáló rendszerekre.

Mi az OpenMind alkalmazáskészítő?

Az OpenMind App Builder egy kód nélküli és alacsony kódú vizuális felület a robot viselkedésének OM1-en történő konfigurálásához. Fiók létrehozása után az OpenMind fejlesztői portálon keresztül érhető el. A konfigurációs fájlok kézi írása helyett a fejlesztők vizuális csomópontok összeállításával építik az alkalmazásokat, amelyek a robot üzemmódjait reprezentálják, és meghatározzák, hogyan kapcsolódnak ezek az üzemmódok.

Minden alkalmazás folyamatábraként van ábrázolva. A csomópontok olyan viselkedési állapotoknak felelnek meg, mint az üdvözlés, a navigáció vagy a térképezés. A csomópontok közötti átmenetek határozzák meg, hogy mikor és hogyan vált át a robot az egyik viselkedésről a másikra. A kapott konfiguráció mentésre kerül, és a portálon keresztül közvetlenül telepíthető kompatibilis hardverre.

Az App Builder nem helyettesíti a hagyományos programozást. Inkább az OM1 konfigurációs rendszerére épül, és strukturált konfigurációs fájlokat exportál, amelyek a kódban bővíthetők vagy módosíthatók a speciális használati esetekhez.

Fedezze fel az ígéretes projekteket...

Ígéretes projektek...

(Hirdetés)

A cikk folytatódik...

Alapfogalmak és terminológia

Az Alkalmazásszerkesztő megértése számos OM1-fogalom ismeretét igényli.

Módok

A mód egy diszkrét viselkedési állapot. Például egy robotnak lehet egy üdvözlő módja, egy navigációs módja és egy memória módja. Minden mód meghatározza, hogy melyik nyelvi modellt használja, mely érzékelők aktívak, mely műveletek engedélyezettek, és milyen háttérkontextus érhető el.

Csomópontok és átmenetek

A vizuális szerkesztőben minden mód egy csomópontként jelenik meg. Az átmenetek irányított kapcsolatok a csomópontok között. Az átmenet olyan feltételeket tartalmaz, amelyek meghatározzák, hogy a robot mikor lép át egyik módból a másikba. A fejlesztők meghatározhatják, hogy egy szóbeli parancs váltson ki váltást a tétlen viselkedésből a navigációba.

Bemenetek, műveletek és hátterek

A bemenetek érzékelőket vagy adatforrásokat, például mikrofonokat, kamerákat vagy webalapú hírfolyamokat jelölnek. A műveletek kimeneteket, például mozgásparancsokat, beszédszintézist vagy memóriába írást jelentenek. A hátterek állandó kontextust biztosítanak, például GPS-helyzetet vagy navigációs állapotot.

Életciklus horgok

Minden mód tartalmaz életciklus-horgokat, beleértve egy rendszerkérést a nyelvi modellhez. Ez lehetővé teszi a fejlesztők számára, hogy a konfiguráció részeként tárolt természetes nyelvi utasítások segítségével szabályozzák a modell viselkedését egy adott módban.

Hogyan működik az Alkalmazásszerkesztő a gyakorlatban?

A bejelentéssel együtt közzétett bemutató videó a teljes munkafolyamatot bemutatja a kezdetektől a telepítésig.

Robot kiválasztása

Amikor egy fejlesztő megnyitja az Alkalmazásszerkesztőt, az első lépés egy gép kiválasztása az oldalsávon. Ez a konfigurációt egy adott robotprofilhoz társítja, beleértve a támogatott érzékelőket és műveleteket is. Az OM1 egy dedikált rétegen keresztül biztosít hardveres absztrakciót, lehetővé téve, hogy ugyanazt a magas szintű konfigurációt újra felhasználják hasonló gépeken.

Építési módok vizuális megjelenítése

Egy robot kiválasztása után a vászon egy kezdeti folyamatábrával jelenik meg. A fejlesztők új módokat adhatnak hozzá egy plusz ikonra kattintva. Minden új mód egy szerkesztőpanelt nyit meg, ahol a paraméterek definiálhatók.

Ezen a panelen belül a fejlesztő kiválaszt egy nyelvi modellt egy legördülő listából. A támogatott lehetőségek között számos kereskedelmi és nyílt modell is szerepel. Ezután a bemeneti elemek adódnak hozzá, például az automatikus beszédfelismerés a hangvezérléshez vagy a kameraképek a látáshoz. Ezután kiválaszthatók a műveletek, például a navigáció vagy a beszédkimenet. Háttérként olyan elemek is engedélyezhetők, mint a GPS vagy a navigációs kontextus.

Minden módosítás azonnal mentésre kerül, és a vászon frissül, hogy tükrözze az aktuális konfigurációt.

Átmenetek meghatározása

Miután a módok létrejöttek, az átmeneteket egy csatlakozó egyik csomópontról a másikra húzásával lehet definiálni. Ez megnyit egy szabályszerkesztőt, ahol a feltételek adhatók meg. A feltételek hivatkozhatnak bemenetekre, belső állapotra vagy más jelekre. Például egy átmeneti szabály meghatározhatja, hogy egy felismert hangparancs hatására a robot elhagyja a tétlen módot, és navigációs módba lép.

Az automatikus formázási funkció átrendezi a vásznat, hogy a folyamatábra olvasható maradjon, ahogy növekszik.

bevetés

Amikor a konfiguráció elkészült, a fejlesztő közvetlenül a felületről telepítheti. A konfiguráció az OpenMind portálon keresztül feltöltődik a robotra, és manuális fájlátvitel nélkül alkalmazható. Az OM1-et helyben vagy éles környezetben használó csapatok számára ugyanaz a konfiguráció telepíthető parancssori eszközökkel vagy konténerizált munkafolyamatokkal.

Támogatott modellek és összetevők

Az OpenMind szerint az App Builder jelenleg több mint hat nyelvi modellt, több mint negyven bemenetet, harminc műveletet és több mint tíz háttérkontextust támogat. Ezek a számok az OM1 moduláris felépítését tükrözik, ahol minden komponens pluginként van megvalósítva.

A nyelvi modellek az alkalmazáslogika átírása nélkül cserélhetők. A bemenetek és a műveletek hasonlóan felcserélhetők, amennyiben az alapul szolgáló hardver támogatja őket. Ez a megközelítés lehetővé teszi a fejlesztők számára, hogy gyorsan kísérletezzenek különböző konfigurációkkal, miközben megőrzik az egységes struktúrát.

Integráció az OM1-gyel és a kódalapú munkafolyamatokkal

Bár az App Builder a vizuális konfigurációra helyezi a hangsúlyt, úgy tervezték, hogy integrálódjon az OM1 kódbázisába.

A fejlesztők strukturált fájlokként exportálhatják a konfigurációkat, és verziókövetésben tárolhatják azokat. A haladó felhasználók egyéni bemeneteket és műveleteket hozhatnak létre Python modulok hozzáadásával az OM1 adattár megfelelő könyvtáraihoz. Ezek az egyéni komponensek ezután megjelennek az App Builder felületén kiválasztás céljából.

Nagy léptékű vagy peremhálózati eszközökön, például Nvidia Jetson hardveren történő telepítéshez az OM1 támogatja a konténer alapú beállításokat. Az App Builder kiegészíti ezeket a munkafolyamatokat azáltal, hogy csökkenti a kezdeti konfigurációra és iterációra fordított időt.

Hardver absztrakció és hordozhatóság

Az OM1 egyik alapvető tervezési célja a hardveragnoszticizmus. Az App Builder ezt tükrözi azzal, hogy csak a magas szintű viselkedéseket mutatja be az alacsony szintű motorvezérlés helyett. Például egy fejlesztő konfigurálhat egy navigációs műveletet anélkül, hogy meghatározná, hogyan mozognak az egyes ízületek.

Ez az absztrakció egy hardveres absztrakciós rétegen keresztül valósul meg, amely az OM1 műveleteit robotspecifikus szoftverfejlesztő készletekhez, például a ROS2-höz vagy a gyártói API-khoz köti. Ennek eredményeként ugyanaz az alkalmazáslogika gyakran minimális változtatásokkal újra felhasználható különböző robotok között.

Korlátozások és szempontok

Az Alkalmazásszerkesztő célja a gyakori feladatok egyszerűsítése, de nem szünteti meg a mérnöki megítélés szükségességét.

Egyes hardverplatformok korlátozott támogatást nyújtanak a számítási képességektől függően. A teljes funkciókészlet jelenleg az újabb Nvidia-alapú rendszereken érhető el, míg a régebbi platformok kompromisszumokat igényelhetnek. Az OM1 központi futtatókörnyezete a biztonság és a megbízhatóság érdekében korlátozza a közvetlen internet-hozzáférést is, ami befolyásolja a külső API-k használatát.

Az összetett autonómia érdekében a fejlesztőktől elvárják, hogy az App Builder konfigurációit szimulációval, megerősítéses tanulással és kiterjedt teszteléssel kombinálják. Az OpenMind dokumentációja hangsúlyozza, hogy az egyszerű viselkedésekkel kell kezdeni, és azokat szimulált környezetekben validálni kell, mielőtt valódi gépekre telepítenék.

Összegzés

Az OpenMind App Builder egy vizuális konfigurációs eszköz, amely az OM1 futtatókörnyezetre épül, és leegyszerűsíti a robotalkalmazások létrehozását és telepítését. A robot viselkedésének módokként, átmenetekként és moduláris komponensekként való ábrázolásával lehetővé teszi a fejlesztők számára, hogy funkcionális alkalmazásokat állítsanak össze anélkül, hogy minden lépéshez kódot kellene írni.

Értéke abban rejlik, hogy csökkenti a beállítási súrlódást, miközben kompatibilis marad a kódalapú munkafolyamatokkal. Az OM1-re építő csapatok számára az App Builder strukturált módot kínál a robotok viselkedésének tervezésére, tesztelésére és telepítésére különböző hardverplatformokon. A hagyományos fejlesztés helyettesítése helyett olyan felületként szolgál, amely az alapul szolgáló rendszert hozzáférhetőbbé és könnyebben értelmezhetővé teszi.

Források:

• X-PostBemutatkozik az OpenMind alkalmazáskészítő 
• Fejlesztői portálAlkalmazások fejlesztése az OpenMind platformon