Gürcüstan Texnologiya İnstitutu tərəfindən

Sadie Harley tərəfindən redaktə edilib , Robert Egan tərəfindən nəzərdən keçirilib

 Redaktorların qeydləri

 GIST

Tercih edilən mənbə kimi əlavə edin

Mənbə: Şəkil redaksiya heyəti tərəfindən illüstrativ məqsədlər üçün süni intellektdən istifadə etməklə yaradılıb.

Ağıllı eynəklər kimi genişlənmiş reallıq (AR) cihazları tezliklə istifadəçinin hara baxacağını təxmin edə və inkişaf etmiş interaktiv təcrübə təmin edə biləcək.

Corciya Texnologiya Universitetinin İnteraktiv Hesablama Məktəbində doktorantura təhsili alan Fiona Rayan, 3D mühitlərdə istifadəçi baxışlarını birinci şəxs baxış bucağından izləyən və proqnozlaşdıran qabaqcıl tədqiqatdır.

Hazırda əksər AR cihazları istifadəçilərin hara baxdığına reaksiya verir və geri çəkilir. Rayanın metodu bu cihazlara xəbərdarlıq edə və istifadəçi təcrübəsini daha rahat edə bilər.

“Bu, AR sisteminə şəxsin bundan sonra nə ilə qarşılıqlı əlaqədə olacağını və hara baxacağını təxmin etməyə imkan verir ki, təcrübəni proaktiv şəkildə göstərə bilsin”, – deyə o bildirib.

Rayan Denverdə keçirilən Kompüter Görmə və Nümunə Tanıma (CVPR) üzrə IEEE Konfransında təqdim etdiyi “Eqosentrik Videoda 3D Skan Yollarının Proqnozlaşdırılması” adlı məqalənin aparıcı müəllifidir .

2D sabit görüntülərdən istifadəçi baxışlarını proqnozlaşdırmaqla bağlı mövcud tədqiqatlar mövcud olsa da , onun işi bu məsələni 3D çərçivə vasitəsilə həll edən ilk işdir.Oyna

00:00

00:20SəssizParametrlərPIPTam ekrana daxil olun

Baxış proqnozunu 3D formatına gətirir

“3D dünyasında yaşadığımız və insanlar dinamik olaraq müxtəlif baxış bucaqlarından hərəkət etdikləri üçün baxışları 2D deyil, 3D formatında proqnozlaşdırmalıyıq”, – deyə o bildirib. “Gördüyümüz şey, insanın diqqətinin 3D formatında kosmosdan keçən bir yoludur. Məqaləmiz bunu modelləşdirməyə çalışan ilk məqalədir.”

Rayan tədqiqatın böyük hissəsini Meta-da təcrübə keçərkən aparıb və orada Meta-nın Aria Digital Twin məlumat dəstindən istifadə edib. Məlumat dəstində istifadəçilərin mənzildə obyektlərlə qarşılıqlı əlaqəsini əks etdirən birinci şəxs video görüntüləri var.

“Biz bu məlumat dəstini seçdik, çünki orada tam bir mühitin yüksək dəqiqlikli 3D rekonstruksiyası var və bu, bizə reallıq 3D baxışı əldə etməyə kömək edir”, – deyə o bildirib. “Göz hərəkətini izləyə və onun ətraf mühitlə necə kəsişdiyini görə bilərik.”Ağıllı eynəklər kimi genişləndirilmiş reallıq (AR) cihazları tezliklə istifadəçinin hara baxacağını təxmin edə və inkişaf etmiş interaktiv təcrübə təmin edə bilər. Mənbə: Corciya Texnologiya İnstitutu

Rayanın işinin video nümayişində onun proqram təminatı üzərində fincan olan masaya doğru istifadəçinin yolunu izlədiyi göstərilir. İstifadəçi fincanı götürdükdən sonra proqram təminatı istifadəçinin növbəti dəfə hansı istiqamətə dönəcəyini düzgün proqnozlaşdırır.

“Bir mənzərəyə baxanda hər şeyi birdən-birə tam təfərrüatı ilə görmürük”, – deyə o bildirib. “Müəyyən sahələrə diqqət yetiririk və baxışlarımız bir sıra diqqətlərdir ki, bu da nə etməyə çalışdığımızdan asılı ola bilər. Əgər bir fincan götürmək istəyiriksə, ona baxa bilərik və növbəti addım onu ​​hara qoyacağımıza baxmaq olar.”

AR uzaqgörənliklə nə edə bilər

Rayan bildirib ki, proqram təminatı orta hesabla üç saniyəyə qədər, bəzi hallarda isə 10 saniyəyə qədər gələcəyi proqnozlaşdıra bilir. Bu, AR sisteminin daha təkmilləşdirilmiş mühit yaratması üçün kifayətdir.

“Hazırda gələcəyə o qədər də uzaq baxmırıq, amma daha uzun proqnoz pəncərələrini araşdırmaq maraqlı olardı”, – deyə o bildirib. “Düşünürəm ki, potensial gələcəklər olduqca tez bir zamanda fərqlənəcək, ona görə də kosmosa baxan və hərəkət edən bir insanın qısa bir seqmentindən nəyin ağlabatan şəkildə proqnozlaşdırıla biləcəyini araşdırmağa çalışırıq.”

Rayan məqaləsinin konsepsiyanın sübutu olduğunu və gələcəkdə görüləsi çox işlərin olduğunu söylədi. Artıq bəzi ideyaları var.

“Düşünürəm ki, gələcək modellər imkanları daraltmağa kömək etmək üçün müxtəlif ssenariləri əhatə edə bilər. Bəzən insanın baxışları uzun müddət bir şeydə qalır. Əgər kiminsə nə etməyə çalışdığını bilsək, onun diqqətinin hansı yola yönələ biləcəyi barədə daha yaxşı təsəvvürə malik olarıq.”

Robototexnika tədqiqatları sahəsindəki işinə gələcəkdə də təsirləri ola bilər.

“Bu, potensial olaraq robotların aktiv insan qavrayışını təqlid etməsi üçün alqoritmlər öyrətmək üçün istifadə edilə bilər . Bir insanın bir tapşırığı yerinə yetirərkən nəyə baxdığını başa düşə bilsək, bundan robotun eyni tapşırığı yerinə yetirməyi öyrənməsini asanlaşdırmaq üçün istifadə edə bilərik.”

Daha çox məlumat

Məqalə: Eqosentrik Videoda 3D Skan Yollarının Proqnozlaşdırılması

Əsas anlayışlar

Hesablama 3D görməSüni intellekt geyilə bilən cihazlarCorciya Texnologiya İnstitutu tərəfindən təmin edilir