Aktualizacja Quest v64 przyniosła dwie nieudokumentowane, główne nowe funkcje.
Można by ogólnie pomyśleć, że dziennik zmian oprogramowania systemowego urządzenia elektroniki użytkowej będzie zawierał wszystkie wprowadzone nowe funkcje, ale w przypadku Meta nie zawsze tak jest.
Wersja 64, wydany na początku tego miesiąca, oficjalnie wprowadził do Quest 3 lepszą jakość przekazu, obsługę mikrofonu zewnętrznego i tryb leżenia, a także sprawił, że przesyłanie nie kończy się już po zdjęciu zestawu słuchawkowego.
Jednak zaawansowani użytkownicy Questa zauważyli, że wersja 64 oferuje także dwie główne funkcje, o których nie wspomniano w dzienniku zmian: rozpoznawanie mebli w Quest 3 i jednoczesne śledzenie dłoni oraz kontrolery Touch Pro lub Touch Plus w przestrzeni domowej.
Rozpoznawanie mebli w zadaniu 3
Quest 3 generuje siatkę 3D Twojego pokoju podczas konfiguracji rzeczywistości mieszanej i zawsze może wywnioskować położenie ścian, podłogi i sufitu na podstawie tej siatki 3D. Jednak aż do wersji 64 zestaw słuchawkowy nie wiedział, które kształty w tej siatce reprezentują bardziej szczegółowe elementy, takie jak drzwi, okna, meble i telewizory. Można je zaznaczyć ręcznie, ale ten wymóg ręczny oznaczał, że programiści nie mogli polegać na użytkownikach, którzy to zrobili.
Jednak w wersji 64 na końcu skanowania pokoju w rzeczywistości mieszanej Quest 3 tworzy teraz oznaczoną prostokątną ramkę ograniczającą w kształcie prostopadłościanu wokół:
- Drzwi
- Windows
- Łóżka
- Stoły
- Sofy
- Przechowywanie (szafy, półki itp.)
- Ekrany (telewizory i monitory)
Materiał filmowy dotyczący rozpoznawania mebli z Quest 3 v64 Squashi9.
Twórcy zadań mogą uzyskać dostęp do tych ramek ograniczających za pomocą interfejsu Meta API Scene i używać ich do automatycznego umieszczania treści wirtualnych. Mogą na przykład umieścić planszę do gry na największym stole w pokoju, zastąpić okna portalami lub przedstawić telewizor w grze w pełni VR, tak aby go nie uderzyć.
Apple Vision Pro udostępnia już programistom serię prymitywnych prostokątów 2D przedstawiających powierzchnię siedzeń i stołów, ale nie zapewnia jeszcze ramki ograniczającej 3D. Interfejs API RoomPlan na iPhonie Pro może wykonywać ograniczenia 3D, ale ten interfejs API nie jest dostępny w systemie VisionOS.
Nowa funkcjonalność Questa 3 została po raz pierwszy publicznie zauważona przez użytkownika X Squashi9, o ile możemy stwierdzić. UploadVR przetestował wersję 64 na Quest 3 i stwierdził, że ta funkcja działa bardzo dobrze w przypadku większości kategorii obiektów, z wyjątkiem pamięci masowej, która często tworzy niedokładne granice.
Materiał filmowy dotyczący rozpoznawania mebli w Quest 3 v64 od entuzjasty VR Luna.
Być może myślisz, że to brzmi bardzo podobnie Badania SceneScriptu Meta pokazała się w zeszłym miesiącu. Jednak rozpoznawanie mebli w Quest 3 w wersji 64 jest znacznie bardziej prymitywne niż w SceneScript. Na przykład w przypadku sofy v64 tworzy pojedynczy prosty prostokątny prostopadłościan, który ją otacza, podczas gdy SceneScript generuje oddzielne prostokątne prostopadłościany dla obszaru siedziska i podłokietników, a także cylinder dla oparcia. SceneScript prawdopodobnie wymaga znacznie większej mocy obliczeniowej niż obecne rozpoznawanie mebli w Quest 3, a Meta przedstawiła go wyłącznie w celach badawczych, a nie funkcji krótkoterminowej.
Jednoczesne ręce i kontrolery w domu
Od zeszłego roku programiści Quest mogą eksperymentować z jednoczesnym używaniem śledzenia dłoni i kontrolerów Quest 3 lub Quest Pro i od tego czasu dwa miesiące temu udało im się opublikować aplikacje korzystające z tej funkcji w Quest Store i App Lab. Meta nazywa tę funkcję multimodalną.
Aplikacje Quest 3 mogą teraz jednocześnie używać rąk i kontrolerów
Aplikacje Quest Store i App Lab mogą teraz jednocześnie korzystać ze śledzenia dłoni i kontrolerów Quest 3 lub Quest Pro, co jest funkcją zwaną Multimodal.
W wersji 64 do domowej przestrzeni Quest dodano Multimodal, zarówno w trybie przejściowym, jak i w trybie VR. Pamiętaj jednak, że działa to tylko z kontrolerami Quest 3 lub Quest Pro, więc nie zobaczysz tej funkcji w Quest 2, chyba że kup kontrolery Pro dla $ 300.
Multimodalność umożliwia natychmiastowe przejście między śledzeniem kontrolera a śledzeniem dłoni, bez opóźnień. Umożliwia także korzystanie z jednego kontrolera, jednocześnie śledząc drugą rękę. Oznacza to, że możesz wybrać jeden kontroler, aby poruszać się po domowej przestrzeni Questa bez szarpnięć, tak jak w przypadku pilota do telewizora. Może to być atrakcyjne do przeglądania stron internetowych, oglądania multimediów i zmiany ustawień, oferując precyzję i wyczucie dotykowego kontrolera gąsienicowego, jednocześnie pozostawiając drugą rękę wolną.
- Dystrybucja treści i PR oparta na SEO. Uzyskaj wzmocnienie już dziś.
- PlatoData.Network Pionowe generatywne AI. Wzmocnij się. Dostęp tutaj.
- PlatoAiStream. Inteligencja Web3. Wiedza wzmocniona. Dostęp tutaj.
- PlatonESG. Węgiel Czysta technologia, Energia, Środowisko, Słoneczny, Gospodarowanie odpadami. Dostęp tutaj.
- Platon Zdrowie. Inteligencja w zakresie biotechnologii i badań klinicznych. Dostęp tutaj.
- Źródło: https://www.uploadvr.com/quest-v64-undocumented-features-furniture-recognition-multimodal/