MRTouch Microsoftu dla mieszanej rzeczywistości przekształca dowolną powierzchnię w wirtualny ekran dotykowy

• 2019

Nie będzie błędem twierdzenie, że Microsoft jest pionierem w dziedzinie Mixed Reality, ponieważ firma stworzyła całą platformę opartą na systemie operacyjnym Windows, aby opracować nowe scenariusze przypadków użycia dla technologii MR. Producenci OEM, tacy jak HP i Acer, wypuścili zestawy słuchawkowe MR na wielu rynkach, ale projekt MR firmy Microsoft, HoloLens, nie został jeszcze udostępniony komercyjnie.

Pomimo ograniczonej dostępności, zespół badawczy Microsoftu wykonuje naprawdę niezwykłą pracę, a najnowszym przykładem ich postępu jest MR Touch, który przekształca dowolną powierzchnię w wirtualny ekran dotykowy. Futurystyczna technologia przekształca każdą planarną powierzchnię wokół użytkowników noszących zestaw słuchawkowy HoloLens w ekran dotykowy, za pomocą którego mogą wchodzić w interakcje na wiele sposobów, takich jak surfowanie po Internecie lub oglądanie obiektów 3D wśród innych zadań.

MRTouch oferuje pełne wsparcie wielodotykowe i rejestruje dane wejściowe, obliczając dane głębokości i bliskości, stale śledząc środowisko użytkownika i gesty dłoni, z wskaźnikiem skuteczności wykrywania dotyku wynoszącym 97, 5% i dokładnością przestrzenną wynoszącą 5, 4 mm średniego błędu odległości. Użytkownicy mogą uruchomić aplikację, przeciągając palcem po dowolnej powierzchni, tworząc wirtualny ekran dotykowy i wybierając dowolną aplikację z interfejsu, który wygląda jak domyślny układ systemu Windows 10.

Jeśli chodzi o zakres zadań, które można wykonać, cóż, wydaje się, że użytkownicy mogą używać zestawu słuchawkowego HoleLens jako maszyny komputerowej do codziennych zadań za pomocą MRTouch, wraz z obsługą gestów takich jak przesuwanie i powiększanie. Wirtualny ekran dotykowy generowany przez MRTouch może nawet tworzyć realistyczną zawartość 3D, a także obsługuje gesty w powietrzu w celu tworzenia interakcji w przestrzeni 3D, np. Tworzenie układu bloków w Minecrafcie z precyzyjną regulacją poprzez wejścia dotykowe.

Film pokazuje użytkownika testu po prostu przeciągając jego palec, aby utworzyć dwuwymiarowy blok, otwierając pięści, aby przekształcić blok w trójwymiarowy model i dostosowując jego wysokość, podnosząc ręce w górę lub w dół (podobnie jak Raport mniejszości lub Jarvis Tony'ego Starka AI). Co więcej, użytkownicy mogą także przenosić interfejs w powietrzu do płaskiej powierzchni i wchodzić z nim w interakcje jak normalny ekran dotykowy, jednak nie ma żadnych szczegółów, gdy technologia MRTouch zobaczy szersze wydanie.