ادوبی مدل جدیدی به نام Firefly Video Model را معرفی کرده است، یک مدل هوش مصنوعی که قرار است قابلیتهای هوش مصنوعی تولیدی را به ابزارهای تولید ویدیو مانند Premiere Pro و احتمالاً After Effects اضافه کند.
این مدل قادر به تولید فریمهای صوتی یا تصویری اضافی از یک کلیپ ویدیویی موجود و حتی تولید کلیپهای جدید از تصاویر مرجع یا دستورات متنی است.
در ادامه، به برخی از سوالات متداول درباره مدل ویدیویی Firefly پاسخ دادهایم.
مدلهای هوش مصنوعی Firefly چه کاری میتوانند انجام دهند؟ Firefly که سال گذشته منتشر شد، مجموعهای از ابزارهای هوش مصنوعی تولیدی است که بهصورت یک برنامه وب و بهصورت یکپارچه در ابزارهای Adobe Creative Cloud در دسترس است.
این مدلهای هوش مصنوعی ابتدا برای تولید تصاویر ثابت طراحی شده بودند و اکنون در برنامههایی مانند فتوشاپ و ابزارهای Substance 3D ادغام شدهاند.
ویژگیهای کلیدی مدل ویدیویی Firefly چیست؟ مدل جدید Firefly Video این قابلیتها را به تصاویر متحرک گسترش میدهد و بهطور مشابه به پلتفرمهایی مانند Runway، ویدیوهای جدیدی را از منابع مختلف تولید میکند.
به گفته ادوبی، این مدل شامل قابلیتهای Generative Extend است که کلیپهای ویدیویی موجود را گسترش میدهد و فریمهای جدید را در ابتدای یا انتهای ویدیو ایجاد میکند و یا حتی صدای اضافی مانند صدای محیط تولید میکند.
قابلیت Image to Video کلیپهایی بر اساس تصاویر مرجع یا حتی تصاویر مفهومی ایجاد میکند.
Text to Video ویدیو را از دستورات متنی تولید میکند، با این قابلیت اضافی که میتوان ویژگیهای دوربین مانند موقعیت دوربین، میزان زوم و انواع حرکتهای معمول دوربین را مشخص کرد.
مدل ویدیویی Firefly چه نوع ویدیو و انیمیشنی میتواند تولید کند؟ مدل ویدیویی Firefly قادر به تولید انیمیشنهای 2D و 3D است و ادوبی در پست بلاگ خود نمونههایی از ویدیوهایی که شبیه به انیمیشنهای سهبعدی، دستساز و استاپموشن هستند، ارائه داده است. با این حال، استفاده اولیه آن برای تولید ویدیوهای طبیعیتر است.
به گفته ادوبی، این مدل “در تولید ویدیوهای دنیای طبیعی مانند مناظر، گیاهان یا حیوانات مهارت دارد”.
اما شرکت همچنین به طیف وسیعی از کاربردهای دیگر اشاره کرده است، از جمله ایجاد عناصر FX مانند آتش، دود و گرد و غبار که میتواند در پروژههای VFX یا موشن گرافیک استفاده شود.
کیفیت مدل ویدیویی Firefly چگونه است؟ اگرچه مدل ویدیویی Firefly پتانسیل تولید دنبالههای کامل ویدیویی را دارد، اما ابزارهای تولید ویدیوی فعلی با مشکلاتی مانند حفظ سازگاری زمانی و سبکی در خروجی خود روبهرو هستند.
ادوبی در پست بلاگ خود اشاره کرده است که استفاده اولیه از این مدل برای تولید محتوای مکمل برای پروژههای فیلمبرداری شده بهصورت متعارف است – به عبارت دیگر، تولید فوتیج استوک توسط هوش مصنوعی – و از کاربردهایی مانند تولید B-roll و شاتهای تاسیسکننده استفاده کرده است.
کدام برنامههای ادوبی مدل ویدیویی Firefly را یکپارچه خواهند کرد؟ ابزارهای Firefly به صورت آنلاین در دسترس هستند، اما ادوبی بهطور فزایندهای در حال یکپارچهسازی آنها در ابزارهای Creative Cloud خود است.
تا کنون، تنها برنامهای که مدل ویدیویی Firefly بهطور قطع در آن گنجانده خواهد شد، نرمافزار ویرایش ویدیو Premiere Pro است که قرار است قابلیت Generative Extend را در بیلدهای بتا “تا اواخر امسال” شامل شود.
با این حال، ادوبی در پست بلاگ خود از اپلیکیشن کامپوزیتینگ After Effects نیز نام برده است. این شرکت پیشتر پیشنمایشهای فنی ابزارهای هوش مصنوعی تولیدی مناسب برای After Effects را نشان داده است.
مدل هوش مصنوعی ویدیویی Firefly با چه دادهای آموزش دیده است؟ ادوبی مدل هوش مصنوعی ویدیویی Firefly را به عنوان “ایمن برای استفاده تجاری و تنها با محتوایی که اجازه استفاده از آن را داریم” توصیف کرده است.
اوایل امسال، این شرکت شرایط استفاده خود را بهروزرسانی کرد تا بهطور صریح استفاده از محتوای کاربران برای آموزش مدلهای هوش مصنوعی را ممنوع کند، به جز محتوایی که به بازار محتوای استوک Adobe Stock آپلود شده است، در پی واکنش گسترده هنرمندان.
قیمت، تاریخ انتشار و نیازمندیهای سیستم مدل ویدیویی Firefly در حال حاضر یک پیشنمایش تکنولوژیک است و قرار است تا “اواخر امسال” در نسخه بتا عمومی در دسترس قرار گیرد.
علاوه بر Premiere Pro، ادوبی هنوز اعلام نکرده است که این مدل در کدام برنامههای Creative Cloud یا در کدام نسخهها یکپارچه خواهد شد.
خدمات هوش مصنوعی تولیدی موجود Firefly به صورت اعتباری است. جزئیات قیمت را میتوانید اینجا پیدا کنید.
