Runway је најавио Praxis-1, модел за управљање роботом за који наводи да се ослања на обимну претходну обуку на видео-садржајима, коришћену и за његове светске моделе. Компанија каже да га одабрани роботски партнери тестирају на сопственим машинама. Планира да наредних месеци јавно објави параметре модела; када је BIG CHANGE проверио страницу 3. октобра, они још нису били доступни. Runway је страницу датирао у септембар 2026, без навођења дана.

Питање у позадини је да ли свакодневни видео-садржаји могу да роботу пруже корисно знање пре него што почне да учи из демонстрација рада робота. Runway нуди поређење грешке позиционирања и одабране снимке задатака. Детаљи потребни за понављање резултата још нису објављени.

Велика промена

  • Шта се променило: Runway преноси претходну видео-обуку на предвиђање роботских радњи и наводи да је тестирао модел на више врста хардвера партнера. То би могао бити начин да се искористе бројни снимци из трећег лица у области у којој је прикупљање података о демонстрацијама рада робота скупо. Praxis-1 је и даље доступан само одабраним партнерима.
  • Зашто је важно: Runway-ов графикон наводи коначну грешку позиционирања после дообуке од 16,1 cm за претходну обуку на веб-видеу и 16,0 cm за претходну обуку на видео-снимцима рада робота под даљинским управљањем. Приказане тачкасте процене су блиске. Траке ±1 SEM на 93 пара за процену не доказују ни значајну разлику ни еквивалентност, а објављени протокол је превише оскудан да би се проценио учинак на другом роботу.
  • Шта треба пратити: Јавно објављени параметри модела, детаљи процене по задацима и резултати партнера омогућили би истраживачима да процене колико доприноси претходна видео-обука и какво је прилагођавање потребно сваком роботу. Runway је обећао да ће објавити параметре, али није навео тачан датум.

Како видео улази у модел управљања

Runway-ова страница истраживања Praxis-1 наводи да његови велики видео-модели уче обрасце понашања предмета, покрета руку и физичких задатака. Компанија каже да Praxis-1 уводи ту претходну обуку у општи модел политике управљања роботом. Њен аргумент је да снимци из трећег лица могу бити добра полазна тачка пре обуке робота за конкретан задатак. На страници се тврди да се учинак модела побољшава са већим обимом видео-садржаја из трећег лица.

Страница не описује формат посматрања Praxis-1, излаз радњи, поступак дообуке, интерфејс за извршавање нити учесталост управљања. Такође не садржи датотеке параметара модела нити захтеве за хардвер. То су важни изостанци за инжењера који покушава да процени потребно прилагођавање за одређену камеру, хватаљку или мобилну базу. Runway има посебну страницу производа GWM-1 за моделе управљања која описује прилагођену дообуку и SDK за рад у облаку. Не треба претпоставити да се њен интерфејс и пословни услови односе и на Praxis-1.

Runway-ови снимци приказују упутство за постављање тениске лоптице, мобилну базу која прилази полици и узима књигу, као и примере са понављајућим предметима, нередом, провидним материјалима и тканином. Још један снимак описан је као приказ истог модела који се креће између студија и кухиње без поновне обуке. Ово су примери које је одабрао програмер; страница не наводи број покушаја нити стопе успешности.

Шта показује графикон грешке позиционирања

Једино бројчано поређење на Runway-овој страници јесте коначна грешка позиционирања после дообуке, мерена у центиметрима, при чему је мања вредност боља. На графикону је за претходну обуку од почетка на веб-видеу наведено 16,1 cm, а за претходну обуку од почетка на видео-снимцима рада робота под даљинским управљањем 16,0 cm. Runway приказује сате видео-обуке и наводи да траке грешке и опсег представљају ±1 стандардну грешку средње вредности за 93 пара у процени. У напомени стоји да разлике мање од једне траке нису значајне.

Приказане тачкасте процене разликују се за 0,1 cm. Runway на овој страници није објавио састав задатака, број робота или окружења, начин формирања 93 пара, количину података о роботима коришћених за дообуку нити потпун статистички тест. У поређењу које је изабрао да прикаже, наведене коначне тачкасте процене грешке позиционирања после дообуке су блиске. Графикон не доказује статистички значајну разлику нити еквивалентност по тој мери. Такође не показује поуздан завршетак дужих задатака са снимака нити смањење потребне количине података у стварној примени.

Runway наводи и корелацију од 0,95 између резултата модела за управљање роботом у симулацији и стварном свету. Тај број потиче из ранијег истраживања процене модела управљања, у којем је рангирано осам модела на задацима за сто са једном руком Franka Panda. То је посебна студија процене модела, а не мера учинка Praxis-1 у реалним условима.

Какав је приступ тренутно

Runway наводи Noble Machines, Standard Bots и Ultra као ране партнере који користе Praxis-1 на сопственом хардверу. У том одељку објава помиње дворуку манипулацију, руку са шест степени слободе и мобилну базу. Runway каже да процењује ефикасност и безбедност у различитим телесним конфигурацијама и окружењима пре опште доступности, и позива додатне одабране партнере да се обрате његовом роботском тиму.

Истраживачима изван тог програма доступни су објава, графикон и снимци. На страници нема јавног преузимања параметара Praxis-1, објављеног поступка интеграције нити пакета за поновљиву процену. Runway не наводи накнаде за приступ, будућу лиценцу за параметре, потребне рачунарске ресурсе нити општи датум објављивања. Тим који разматра рани приступ може да користи јавне информације да припреми разговор о сопственом хардверу и потребама процене, али само на основу објаве не може да понови приказано поређење. BIG CHANGE није тражио приступ нити тестирао робота.

Наши ранији извештаји о моделима GPT-Policy и HomeBody баве се различитим истраживачким питањима. GPT-Policy задаје демонстрације фиксном моделу вида и језика, уз повратне информације од робота; HomeBody повезује просторну меморију хуманоидног робота са вештинама које се могу поново користити. Praxis-1 испитује може ли широка претходна обука на видео-садржајима да побољша сам модел управљања. Runway још није објавио имплементацију нити довољно детаља процене да би се проверио учинак изван приказаног поређења.

Извори и додатна литература