Wirtualny świat ze zdania za darmo. Roboty tylko w pokazach

Od 8 października model Odyssey-3 można wypróbować za darmo w przeglądarce: wpisuje się zdanie, a program buduje z niego świat do chodzenia. Zbudowała go kalifornijska firma Odyssey. Robi modele świata, czyli programy wymyślające otoczenie i jego fizykę na bieżąco, klatka po klatce. Sterowanie robotami, autem i dronem, opisane w ogłoszeniach firmy, Odyssey pokazuje na własnych nagraniach. Demo maszynami nie steruje.

Demo działa na wersji Odyssey-3 Flash. Adres: experience.odyssey.systems. Po świecie można się poruszać i wywoływać w nim zdarzenia, a model od razu dorysowuje ich skutki. Programiści mogą złożyć wniosek o dostęp przez API (łącze do podpięcia modelu pod własny program).

Świat powstaje na bieżąco. Każda nowa klatka obrazu wynika z poprzednich klatek i z ruchów gracza. Model uczył się na filmach z internetu, na nagraniach z gier zapisanych razem z wciśniętymi klawiszami i ruchami myszy oraz na symulacjach zderzeń przedmiotów.

Odyssey ogłosiło, że wersja Pro pobiła rekord w teście Physics-IQ Verified. Test przygotowali badacze z laboratorium Anates Labs i z Google DeepMind, działu badawczego Google. Model dostaje początek nagrania prawdziwego doświadczenia, na przykład z cieczą, światłem albo magnesem, i ma dokończyć film. Wynik porównuje się z prawdziwym przebiegiem.

Rekord pochodzi z jednego przebiegu: dla każdego zadania wybrano najlepszy z ośmiu filmów. Regulamin testu wymaga przy rekordzie czterech przebiegów i podania rozrzutu. Oba wyniki zgłosiła sama firma.

W drugiej kategorii tego samego testu model dostaje na start pojedynczy obraz. Ranking tej kategorii na stronie testu prowadzi FLUX 3 [large] od Black Forest Labs, twórcy modeli obrazu FLUX, a Odyssey-3 Pro jest drugi. Przy innym teście, WorldMark, Odyssey samo zaznacza, że takie wyniki opisują wygenerowane światy. Sterowanie maszyną wymaga osobnej oceny.

W ogłoszeniu z 15 września Odyssey-3 służy maszynom za wyobraźnię. Do modelu dokłada się osobny sterownik, uczony na nagraniach pracy danej maszyny. Ramionom robotów wystarczyło kilkadziesiąt godzin pokazów. Według firmy same poprawiały też nieudany chwyt, choć tego ich nie uczono.

Sterownik uczony na 20 godzinach jazdy w symulatorze prowadził auto po ulicach w Indiach, a jazdę nadzorował kierowca bezpieczeństwa. Wersje z symulatora przejeżdżały między jego interwencjami około 77 procent dystansu wersji uczonych na prawdziwych nagraniach z drogi. Człowiek wciąż musiał przejmować jazdę.

Dron latał w symulowanym pokoju i omijał tam przeszkody. W grze GTA V sterownik prowadził postać: jeździł nią i walczył. Część tych nagrań firma nazywa wybranymi przykładami.

Przy robotach człekokształtnych Odyssey współpracuje ze szwajcarską firmą Flexion. Jej sterowniki na Odyssey-3 działały także po zmianie oświetlenia. Modele porównawcze w tych warunkach zawodziły, według ocen samego Odyssey. Odyssey prowadzi też sprawdzian z Poke & Wiggle, firmą od danych i testów robotów. Ma pokazać, gdzie wiedza modelu przenosi się na nowe maszyny, a gdzie zawodzi. Ogłoszenia nie podają jego wyników.

W czerwcu inwestorzy, wśród nich Amazon, wycenili Odyssey na 1,45 mld dolarów. Konkurenta wyceniono wyżej. We wrześniu AMD ogłosiło zakup World Labs, firmy założonej przez badaczkę Fei-Fei Li, za około 8,2 mld dolarów, ponad pięć razy więcej. Podobny model, Genie 3, rozwija Google DeepMind.