Google Hindistonda Dreambeans eksperimental ilovasini ishga tushirdi

ByteDanceʼning generativ media ilovasi Dreamina 26-oktabrda oʻzining maxsus qisqa dramalar studiyasi faol ekanligini eʼlon qildi. Bu studiya vertikal videodagi drama formatiga maxsus moʻljallangan birlashtirilgan ishlab chiqarish jarayoniga uchta maxsus modelni integratsiya qiladi.

Birinchi komponent – bu ssenariy yaratish modeli boʻlgan DreamScript. U asl hikoyalar, moslashtirishlar, xalqaro versiyalar va sharh uslubidagi segmentlar kabi turli ustun janrlarda ssenariylarni yaratishga qodir. Bundan tashqari, tizim 'muvaffaqiyat diagnostikasi' deb nomlangan funksiyani taqdim etadi, u loyihani joriy platforma tendensiyalari bilan solishtirib, tuzilmaviy yaxshilanishlarni tavsiya qiladi va 100 000 belgigacha matnlarni qayta ishlash va tahlil qilish imkoniyatiga ega.

Ikkinchi model, Anycook, qisqa dramalarning sanʼat yoʻnalishi uchun moʻljallangan tasvir generatori sifatida ishlaydi. Dreamina taʼkidlashicha, Anycook personajlarning ishlab chiqarish davomida vizual jihatdan bir xilligini saqlab qolishini va turli hikoya muhitlari uchun mos keladigan turli vizual uslublarda sahnalar qurishini taʼminlash uchun kalibrlangan.

Uchinchi model, DreamShot, eskizlar modeli vazifasini bajaradi. U ikki konfiguratsiyada ishlaydi – erkin kanvas yoki tuzilgan eskizlar. U global oʻzgartirishlarni qoʻllab-quvvatlaydi, yaʼni vosita bilan oʻzaro aloqa orqali kiritilgan har qanday sozlama kadrma-kadr oʻzgarishlar talab qilmasdan butun taxtani yangilaydi. 3D rejissyor stolchasi ijodkorlarga virtual kamerani joylashtirish, uning harakatini belgilash va renderlashdan oldin natijaviy kaderni koʻrib chiqish imkonini beradi; tizim shuningdek, temp va uzluksizlikni tekshirish uchun dastlabki animatsion ketma-ketlikni yaratish maqsadida asosiy kadrlarni bogʻlashi mumkin.

Post-produksiya qatlami bu uchta asosiy modelni oʻrab turadi. Alohida kadrlarni butun asarni qayta yaratishga hojat qolmagan holda oʻrnida qayta suratga olish mumkin. Integratsiyalashgan audio vositasi dialogni atrof-muhit tovushidan ajratish imkonini beradi, bu esa sahnalarni qayta ovozlashga imkon beradi. Bundan tashqari, kadrlarni boʻlish funksiyasi uzun ketma-ketliklarni boshqariladigan, tahrirlanadigan birliklarga avtomatik ravishda boʻladi. Dreamina ichidagi boshqa joylarda yaratilgan aktivlar studiyaga oqib kiradi va qoʻllanilgan har qanday tahrirlash ushbu oʻrnatilgan zanjirni kuzatib boradi.

Tarqatishga eng koʻp yoʻnaltirilgan funksiya qayta yaratish rejimi hisoblanadi. Foydalanuvchilar mavjud qisqa dramani yuklashi mumkin, va tizim uning personajlari, maydonlari, rekviziti va kadrlash tuzilishini aniqlaydi. Soʻngra u tanlangan uslub, nisbat va maqsadli mintaqaga muvofiq vizuallarni qayta yaratadi, barcha jarayon davomida asl temp va kamera tilini saqlab qoladi. Bu Xitoy studiyalari faol eksport qilayotgan format uchun lokalizatsiya quvvetini samarali yaratadi.

ByteDance bu bozorni video modellarini ishlab chiqishdan tortib, sunʼiy intellekt tomonidan yaratilgan dramalar uchun platforma ragʻbatlantirish taklif qilishgacha boʻlgan bir nechta strategiyalar orqali amalga oshirmoqda. Ssenariy, tasvir va eskiz modellarini bitta studiyaga integratsiya qilish kompaniya tomonidan butun ishlab chiqarish zanjirini bitta mahsulot ichida taqdim etgan birinchi holatdir.

ByteDance kompaniyasi qisqa dramatik seriallar ishlab chiqarish uchun moʻljallangan Jimeng AI sunʼiy intellekt studiyasini taqdim etdi. Ushbu platforma butun ishlab chiqarish siklini birlashtiradi: ssenariyni ishlab chiqish va personajlar hamda sahnalarni yaratishdan tortib, raqamli eskizlar, videografiya va keyingi qayta ishlashgacha.

Studiyada uchta oʻziga xos model ishlatiladi: ssenariylarni yozish uchun masʼul boʻlgan DreamScript; tasvirlar yaratish uchun ishlatiladigan Anycook; va raqamli eskizlarni yaratish uchun moʻljallangan DreamShot.

DreamScript vositasi asl hikoyalar bilan ham, moslashtirishlar bilan ham ishlashi mumkin, shuningdek, xorijiy auditoriyaga yoʻnaltirilgan ssenariylarni yaratishi mumkin. Shu bilan birga, tasvirlar va raqamli eskizlar bilan ishlash vositalari ijodkorlarga vizual elementlarni shakllantirishga va kadrlarni rejalashtirishga yordam beradi.

Bundan tashqari, studio bitta kadrlarni almashtirishga, audio yoʻlaklarni tiklashga va mavjud dramalarni turli bozorlar uchun mos keladigan vizual uslubda qayta ishlash imkonini beradi. Shunday qilib, bu studiyaning ishga tushirilishi Jimeng imkoniyatlarini oddiy tasvir yoki video generatsiya vazifalaridan tashqariga kengaytirib, ularni qisqa dramatik loyihalarni muvofiqlashtirilgan ishlab chiqarish darajasiga olib chiqadi.

Dream Labs kompaniyasi kundalik robotlarda qoʻllaniladigan sunʼiy intellektni yaratish uchun urugʻ fondi sifatida 90 million dollar jalb qildi. San-Fransisko markazlashgan bu startap 2026 yilda NVIDIA ning GR00T tadqiqot guruhining sobiq rahbarlari tomonidan tashkil etilgan.

Moliyalashtirish turini B Capital va Kindred Ventures boshqardi. Boshqa investorlar orasida A. Capital, Unusual Ventures, SV Angel, Wing VC, Scribble VC va Adrian Aoun mavjud boʻldi. Kompaniya robotlar koʻpincha insonlarga oʻxshash muammo bilan duch kelishini taʼkidlaydi: ular bitta aniq vazifa uchun oʻrganiladi, ammo olingan koʻnikmalarni boshqa sohalarda qoʻllay olmaydi.

Dream Labsning maqsadi bitta AI modeli yordamida yanada moslashuvchan robotlar yaratishdir. Bunday tizim yangi vazifalarni bajarishi yoki kamroq malaka talab qilgan holda yangi uskuna bilan ishlashi mumkin boʻladi. Bosh ijrochi direktor Joel Jang sanoatda yetarli darajada qobiliyatli uskunalar borligini, ammo turli robotlar oʻrtasida ishlay oladigan intellekt yetishmasligini taʼkidladi.

Pul jalb qilishdan tashqari, Dream Labs Dream API ni taqdim etdi. Ushbu xizmat robot kamerasi video oqimini va oddiy ingliz tilida berilgan koʻrsatmalarni motorlar uchun buyruqlarga aylantiradi. Ishlab chiqaruvchilar bu xizmatdan foydalanib, oʻzining AI ni yaratish shartmasdan qoʻllab-quvvatlanadigan robotlarni dasturlashtirishi mumkin.

Bundan tashqari, kompaniya Fine-tuning as a Service xizmatini ishga tushirdi. Dasturchilar va robototexnika ishlab chiqaruvchilari namuna maʼlumotlarini yuklab, jihozlanmagan yoki yangi funksiyalar uchun individual sozlamali model olishlari mumkin. Ushbu texnologiyani Robot Playground orqali ham sinab koʻrish mumkin.

Brauzerga ega har qanday foydalanuvchi San-Fransiskodagi Dream Labs ofisidagi jismoniy robotga buyruq yuborishi va real vaqt rejimida reaksiyasini kuzatishi mumkin. Bu mahsulotlar robototexnika AI ni ishlab chiquvchilar va ishlab chiqaruvchilar uchun yanada qulay qilishga, shuningdek, potentsial foydalanuvchilarga keng miqyosda joriy etishdan oldin texnologiyani sinab koʻrish imkonini berishga qaratilgan.

Kompaniyaning flagman modeli, Dream-1, odatiy harakatlarni bajarayotgan odamlarning videoyozuvlari asosida oʻrganiladi. U keyingi voqealarini bashorat qilish va robot harakatini aniqlash uchun vizual maʼlumotlardan foydalanadi. Dream-1 turli xil uskunalarda imkoniyatlarni uzatish uchun moʻljallangan.

Kompaniya oʻziga xos vazifaga oid qoʻshimcha oʻqitishsiz ushlagichlar bilan jihozlangan mos keladigan robotlarni boshqarishini daʼvo qiladi. Hozirda Dream Labs 20 dan ortiq uskunalar hamkorlari bilan hamkorlik qilmoqda. Model narsalarni tanlash, buyumlarni joylashtirish va kiyim yigʻish kabi stoldagi vazifalarni bajarishga qodir.

Gʻildirakli mobil robotlar va yanada mahoratli robot qoʻllarini qoʻllab-quvvatlash rejalashtirilgan. B Capitalning bosh hamkor Daisy Kai shuni aytdiki, uskunaning narxining pasayishi robototexnika intellektini rivojlantirish uchun imkoniyatlar ochmoqda. U erishiladigan dasturiy taʼminot ishlab chiquvchilarga mavjud mashinalar ustida yanada foydali ilovalarni yaratishga yordam berishiga ishonadi.

Dream Labs yangi kapitalning katta qismini hisoblash infratuzilmasini rivojlantirishga yoʻnaltirishni rejalashtirmoqda. Bu investitsiyalar koʻproq foydalanuvchilarni qoʻllab-quvvatlaydi va Dream-1 qayta ishlashi mumkin boʻlgan vazifalar va robot turlari spektrini kengaytiradi. Potensial imkoniyat katta boʻlsa-da, tadqiqotchilarning yondashuvi hali haqiqiy sharoitlarda tekshirilishi kerak.

Dunyo boʻylab yuzlab million sanoat robotlari ishlaydi, ammo ularning aksariyati faqat maʼlum muhitlardagi bir nechta vazifalar bilan cheklangan. Agar model barcha mashinalar bilan ishonchli ishlasa, bu ishlab chiqarish va boshqa jarayonlarni avtomatlashtirishni kompaniyalar uchun soddalashtirishi mumkin. Bundan tashqari, bu kompaniyalarning turli robotlarga mos kelishi uchun ishlab chiqishi kerak boʻlgan tizimlarning sonini kamaytirishi mumkin. Biroq, Dream Labs texnologiyalari turli sharoitlarda, shuningdek, turli xil uskuna va murakkabroq ilovalar bilan oʻz ish qobiliyatini namoyish etishi kerak.