Tehnologije mešovite stvarnosti (MR) i proširene stvarnosti (AR) spajaju stvarni svet sa kompjuterski generisanim elementima, omogućavajući korisnicima da komuniciraju sa svojim okruženjem na zanimljivije načine. Poslednjih godina, ove tehnologije su unapredile obrazovanje i specijalizovanu obuku u brojnim oblastima, pomažući polaznicima da testiraju svoje veštine ili bolje razumeju apstraktne koncepte i podatke.
Istraživači sa Univerziteta u Kalgariju pokušavaju da razviju interfejse i sisteme koji bi mogli da poboljšaju MR vizualizaciju. U skupu radova koji će biti predstavljen na CHI 2023 LBV, predstavili su HoloTouch, sistem koji može povećati grafike i grafikone mešovite stvarnosti koristeći pametne telefone kao fizičke proksije.
„Za mene je ovaj rad bio inspirisan najvećim delom delom koji sam objavio tokom svoje poslednje osnovne godine“, rekao je Neil Chulpongsatorn, jedan od istraživača koji su sproveli studiju, za Tech Ksplore. „Obojica su nastala iz mog interesovanja za mešovite interakcije stvarnosti za predstavljanje podataka“.
U nekim od svojih prethodnih studija, Chulpongsatorn i njegove kolege istraživali su kako mogu da povećaju vizualizacije podataka koristeći virtuelne komponente prikazane preko ekrana na glavi (HMD), kao što je Microsoft HoloLens. Drugi timovi su takođe predložili slična rešenja, kao što su fizički dinamičke trakaste grafikone.
Dok su neki od njihovih prethodnih napora dali zanimljive rezultate, istraživači su shvatili da trenutne MR i AR slušalice ne podržavaju tako dinamične i poboljšane vizualizacije podataka. U svojoj nedavnoj studiji, oni su tako pokušali da zaobiđu ova ograničenja koristeći postojeće i široko korišćene uređaje.
„Umesto da fizičke reprezentacije učinimo interaktivnim, okrenuli smo se ka tome da virtuelno predstavljanje učinimo opipljivim“, rekao je Chulpongsatorn. „Radovi poput MARVIS-a predstavili su ovu ideju na visokom nivou i demonstrirali njen potencijal. Naš nedavni rad kopa dalje dole kako bismo predstavili osnovu ovih interfejsa kao prostora za interakciju koji će dizajneri vizuelizacije koristiti u budućnosti, kao i da procenimo efikasnost ovih interfejsa. modeli interakcije“.
U svojoj nedavnoj studiji, Chulpongsatorn i njegove kolege predstavili su HoloTouch, sistem koji kombinuje HMD i ekrane osetljive na dodir na pametnim telefonima ili tabletima kako bi poboljšao MR vizualizaciju. U suštini, HoloTouch omogućava korisnicima da „dodirnu“ i manipulišu hologramima koje vide na HMD-ovima preko svojih pametnih telefona.
„Naš sistem se bavi nekim od izazova trenutnih MR vizualizacija, kao što su nepouzdano praćenje, niska vizuelna rezolucija i neprecizan unos“, objasnio je Chulpongsatorn. „Novina našeg rada dolazi iz dizajnerskog prostora predstavljenog u radu, a ne toliko od prototipa. U suštini, mnogo smo razmišljali o tome kako mobilni telefoni mogu da komuniciraju sa hologramima (posebno vizuelizacija podataka), sastavili smo referentni dokument i prikazao neke primere.“
Kao deo svoje nedavne studije, istraživači su demonstrirali šest različitih načina za interakciju sa grafikonima i drugim vizuelizacijama podataka koristeći prototip svog sistema. Ovi početni testovi su bili veoma obećavajući, naglašavajući obećanje njihovog rešenja za povećanje vizuelizacije podataka.
„Rezultati preliminarnih procena pokazuju da ljudi generalno više vole da istražuju vizuelizaciju sa proksijem nego bez njega“, rekao je Chulpongsatorn. „Konkretno, preciznost i opipljivost istakli su se kao jake prednosti proksija. Ovo sugeriše da je fizička interakcija sa hologramima korisna za zadatak analize podataka, iako će morati da se uradi još posla da bismo mogli da izvučemo jače zaključke.“
U budućnosti, novi sistem koji je predložio ovaj tim istraživača mogli bi da koriste dizajneri i kreatori sadržaja za predstavljanje podataka studentima, profesionalcima ili javnosti na impresivnije načine. U međuvremenu, Chulpongsatorn i njegove kolege se nadaju da će dodatno poboljšati svoj sistem, dodajući nove funkcije i stilove interakcije.
„Pošto je ovo kasno prelomni posao, ima još mnogo toga da se uradi“, dodao je Čulpongsatorn. „Pre svega, prostor trenutno ima širinu, ali ne i veliku dubinu. Postoje i druge interakcije koje tek treba da istražimo. O nečemu od ovoga smo govorili na kraju rada. Više interakcija znači i više evaluacije koje treba uraditi, kao što to je jedan od naših suštinskih doprinosa ovom radu.“