لومـا، شرکت فعال در حوزه مدلهای هوش مصنوعی و مدلهای سهبعدی که از حمایت مالی شرکت a16z برخوردار است، مدل جدیدی به نام Ray3 Modify عرضه کرده است. این مدل به کاربران اجازه میدهد تا با ارائه تصاویری مرجع از شخصیتها، فیلمهای موجود را ویرایش کنند و اجراهای انسانی در فیلم را به خوبی حفظ نمایند. همچنین کاربران میتوانند یک فریم ابتدایی و یک فریم پایانی ارائه دهند تا مدل فیلمی انتقالی بین این دو فریم تولید کند.
این شرکت روز پنجشنبه اعلام کرد که مدل Ray3 Modify مشکلات مربوط به حفظ عملکرد انسانی در هنگام ویرایش یا ایجاد جلوهها با هوش مصنوعی برای استودیوهای خلاق را برطرف میکند. استارتاپ مذکور توضیح داد که مدل جدید به شکل دقیقتری با ورودی ویدئو همخوانی دارد و به استودیوها این امکان را میدهد که از بازیگران انسانی برای تولید محتوای خلاقانه یا برند استفاده کنند. لــــوما ذکر کرد که مدل جدید حرکتهای بازیگر، زمانبندی، خط نگاه و احساسات اجرایی او را به خوبی حفظ کرده و همزمان صحنه را دگرگون میکند.
با استفاده از Ray3 Modify، کاربران میتوانند یک تصویر مرجع از شخصیت موردنظر برای تغییر در ویدئوی اصلی ارائه دهند و ظاهر بازیگر انسانی را به آن شخصیت تبدیل کنند. این مرجع به سازندگان کمک میکند تا اطلاعاتی مانند لباسها، شباهت ظاهری، و هویت را در طول فیلمبرداری حفظ نمایند.
علاوه بر این، کاربران میتوانند با ارائه فریم ابتدایی و پایانی به عنوان مرجع، توسط مدل جدید Ray3 Modify یک ویدئو بسازند. این قابلیت برای کارگردانها و سازندگان مفید است تا بتوانند انتقال بین صحنهها یا حرکت و رفتار شخصیت را با حفظ تداوم بین صحنهها کنترل کنند.
آمیت جین، همبنیانگذار و مدیرعامل Luma AI، در بیانیهای گفت: «مدلهای تولید ویدئوی هوش مصنوعی قدرت بیانی فوقالعادهای دارند اما کنترل آنها دشوار است. امروز خوشحالیم که Ray3 Modify را معرفی میکنیم؛ مدلی که دنیای واقعی را با تواناییهای هوش مصنوعی ترکیب میکند و کنترل کامل را به خلاقان میدهد. این بدان معناست که تیمهای خلاق میتوانند اجراها را با دوربین ضبط کرده و بلافاصله آنها را به هر مکان دلخواه منتقل کنند، لباسها را تغییر دهند یا حتی با استفاده از هوش مصنوعی مجدد صحنه را فیلمبرداری کنند، بدون نیاز به تکرار فیلمبرداری فیزیکی.»
لومــا اعلام کرد که مدل جدید از طریق پلتفرم Dream Machine در اختیار کاربران قرار دارد. این شرکت که با بازیگران مهمی همچون Runway و Kling رقابت میکند، قابلیتهای ویرایش ویدئو را در خرداد ۱۴۰۴ معرفی کرد.
عرضه این مدل، پس از دور تازه تأمین مالی ۹۰۰ میلیون دلاری صورت گرفت که در آبان ماه سال جاری توسط شرکت هوش مصنوعی Humain متعلق به صندوق سرمایهگذاری عمومی عربستان سعودی رهبری شد. سرمایهگذارانی همچون a16z، Amplify Partners و Matrix Partners نیز در این دور سرمایهگذاری حضور داشتند. این استارتاپ همچنین برنامه دارد تا با همکاری Humain، یک خوشه هوش مصنوعی ۲ گیگاواتی در عربستان سعودی راهاندازی کند.
