Grand Theft Auto və AI komandası it şəkillərini 3D modellərə çevirməyə kömək edir
Surrey Universitetinin mükafatlı araşdırması və məşhur Grand Theft Auto video oyunu sayəsində itlərin fotoşəkilləri tezliklə 3D modelləri əvvəlkindən daha dəqiq yaratmağa kömək etmək üçün istifadə edilə bilər .
Tədqiqatçılar, Grand Theft Auto V-dən istifadə edərək yaratdıqları şəkillər üzərində məşq edən itin 2D təsvirindən 3D pozasını proqnozlaşdırmaq üçün süni intellekt (AI) sistemini öyrətdilər.
“Modelimiz CGI itləri üzərində təlim keçmişdi, lakin biz ondan real heyvanların fotoşəkillərindən 3D skelet modelləri hazırlamaq üçün istifadə edə bildik. Bu, təbiəti mühafizəçilərə yaralı vəhşi təbiəti aşkar etməyə imkan verə bilər və ya rəssamlara metaversedə daha realist heyvanlar yaratmağa kömək edə bilərdi”, – Moira Shooter bildirib. , Aspirantura Tədqiqat Tələbəsi.
Süni intellektə 2D təsvirlərdən 3D məlumat almağı öyrətməyin yollarından biri ona 3D “əsas həqiqəti” haqqında məlumat verərkən ona fotoları göstərməkdir – burada obyektlər əslində 3D məkanındadır. İnsanlar üçün bu, hərəkəti əks etdirən kostyumlar geyinmək deməkdir.
Hətta ən yaxşı davranışlarında belə, onlarla itə hərəkət tutma kostyumları geyindirmək çətin ola bilər.
Bunun əvəzinə tədqiqatçılar öyrənmək üçün saysız-hesabsız virtual itlər yaratdılar.
Tədqiqatçılar Grand Theft Auto-nun kodunu dəyişdirərək, səkkiz növ itdən biri üçün əsas personajı dəyişdirdilər – “modinq” kimi tanınan proses. Onlar müxtəlif hava və işıqlandırma şəraitində itlərin oturması, yeriməsi, hürməsi və qaçması ilə bağlı 118 video hazırlayıb .
Komanda 27,900 kadrdan ibarət yeni verilənlər bazasını DigiDogs adlandırdı. Onlar indi Meta-nın DINOv2 modelindən istifadə edərək onu dəqiq tənzimləyəcəklər ki, o, 3D pozasını, eləcə də real it şəkillərini proqnozlaşdıra bilsin.
“3D pozalar 2D fotoşəkillərdən çox daha çox məlumat ehtiva edir. Ekologiyadan tutmuş animasiyaya qədər – bu səliqəli həllin bir çox mümkün istifadəsi var” dedi Shooter.
Tədqiqat IEEE/CVF-nin Kompüter Görmə Tətbiqləri üzrə Qış Konfransında Ən Yaxşı Məqalə mükafatını qazandı .
Ətraflı məlumat: DigiDogs: Sintetik Təlim D istifadə edərək İtlərin Tək Görünüşlü 3D Poza QiymətləndirilməsiSurrey Universiteti tərəfindən təmin edilmişdir