miHoYo tadqiqotchilar guruhi koʻrish, til va harakatlar (vision-language-action) asosidagi Gamer tizimini tavsifladi. Bu tizim ekrandagi kuzatuvlarni va koʻrsatmalarini klaviatura va sichqoncha buyruqlariga aylantiradi. Ushbu ishning tafsilotlari 21-noyabrda xitoydagi akkauntda taqdim etilgan; qoʻshimcha preprint 13-noyabrda birinchi marta yuklangan va 18-noyabrda tahrirlangan.
Asosiy eksperimental model Qwen3-VL-8Bga asoslanadi. U qaror qabul qilish uchun skrinshotlar, vazifa haqidagi maʼlumotlar, kuzatuvlar tarixi va xotiradan foydalanadi, shu bilan birga ichki oʻyin interfeyslariga tayanmaydi. Loyiha oʻzaro taʼsirni standart grafik interfeyslar va murakkabroq uch oʻlchovli oʻyin muhitlarini qamrab oladigan umumiy harakatlar formati sifatida koʻrib chiqadi.
Oʻqitish oʻyin oʻzaro taʼsiri yoʻnalishlari, koʻrsatmalar boʻyicha sozlash va onlayn kuchaytirish orqali amalga oshiriladi. Mualliflar oldingi oʻzaro taʼsirlar faol kontekstdan chiqqanda vazifa jarayonini saqlab qolish uchun sekin fikrlash va xotirani umumlashtirish mexanizmlarini ishlab chiqdilar, bu cheksiz oʻsib borayotgan dialogni doimiy qayta ishlashdan koʻra afzaldir.
Jamoa Honkai: Star Rail oʻyinining asosiy hikoyasining beshta bobini qamrab olgan taxminan 50 soatlik baholash davomida 95% dan ortiq avtonom ishlashni bildirdi. Muhim jihat shundaki, bu mualliflar tomonidan eʼlon qilingan avtonom ishlash vaqtidir, barcha oʻyinlardagi barcha vazifalarning 95% mukammal bajarilganligi yoki inson aralashuvi toʻliq yoʻqolgani haqidagi bayonot emas.
Maqolada model allaqachon duch kelgan oʻyinning alohida yon vazifalari ham baholanadi. Ikki bunday vazifada vazifalarni bajarishda 80.0% va 83.6% aniqligi erishildi. Kontrol nuqtalariga erishishga asoslangan bu koʻrsatkichlarni boshidan oxirigacha vazifalarni yakunlashning uzluksiz koʻrsatkichlari yoki oldindan oʻqitilmagan yangi oʻyinlarga vazifani oʻtkazish bilan chalkashtirmaslik kerak.
Real vaqt rejimida oʻzaro taʼsirni taʼminlash uchun loyiha Streaming-vLLM deb nomlangan bulut-periferik xizmat koʻrsatish tizimini tasvirlaydi, u doimiy keshlash va harakatlarni erta yuborishni oʻz ichiga oladi. Ushbu arxitekturaning maqsadi parallel ishlov berish va joylashtirishning javobchanligini qoʻllab-quvvatlashdir, ammo u butun tadqiqot tizimi odatiy oʻyin kompyuterida mahalliy ravishda ishlayotganligini kafolatlamaydi.
Loyihaning sahifasida tadqiqotning davomli oldindan oʻqitish kengaytirilishi uchun ishlatilgan kontrol nuqtalari chiqarilganligi koʻrsatilgan, ammo ushbu maʼlumotlar va Honkai: Star Rail maʼlumotlari xavfsizlik maʼlumotlari sababli yopiq holatda qolmoqda. Shunday qilib, jamoatchilikka ochiq tadqiqot artefaktlarini namoyish etilgan oʻyin tizimining toʻliq yuklab olish versiyasi sifatida qabul qilish lozim emas.
Bu isteʼmolchi oʻyin botining eʼlon qilingan yoki tijorat oʻyin akkauntlarini avtomatlashtirish ruxsatnomasi emas, balki tadqiqot loyihasi ekanligi taʼkidlanadi. Ishlash koʻrsatkichlari mualliflar tomonidan baholangan qiymatlar boʻlib, keltirilgan material ushbu natijalarni mustaqil takrorlashni belgilamaydi.



