خبر فوریامروز

رونمایی رسمی و کالبدشکافی هوش مصنوعی Runway Act-One؛ انقلاب در ضبط حرکات چهره و انیمیشن کاراکتر بدون موکاپ و استودیو

کالبدشکافی جامع هوش مصنوعی Runway Act-One؛ ضبط حرکات و احساسات چهره با وب‌کم، انطباق سبک‌گریز بر کاراکترهای انیمیشنی، پیوستگی زمانی ترنسفورمرهای Gen-3 Alpha و دگرگونی استودیوهای سنتی هالیوود.

کالبدشکافی فنی Runway Act-One؛ انتقال حالات چهره و بازیگری به کاراکتر با هوش مصنوعی
رونمایی رسمی و کالبدشکافی هوش مصنوعی Runway Act-One — عکس: آرشیو ماگ بیت
خلاصه در یک نگاه
  • کمپانی رانوِی (Runway) با رونمایی رسمی از ابزار انقلابی Act-One بر بستر مدل ویدئویی Gen-3 Alpha، مرزهای ضبط حرکات چهره و انیمیشن کاراکتر را بازتعریف کرد. این ابزار بدون نیاز به استودیوهای گران‌قیمت موکاپ، کلاه‌خودهای سنسوردار یا ریگ‌بندی پیچیده سه‌بعدی، حرکات صورت، خردحالت‌های احساسی، چرخش چشم‌ها و دیالوگ بازیگر واقعی را از طریق یک ویدئوی ساده وب‌کم ضبط کرده و مستقیماً روی هر کاراکتر دوبعدی، سه‌بعدی، نقاشی یا هایپررئال منتقل می‌کند. این دستاورد، صنعت سینما و انیمیشن مستقل را به سمت دموکراتیزه شدن کامل بازیگری دیجیتال هدایت می‌نماید.
  • بررسی جامع ابعاد فنی و کاربردی توسط تحریریه ماگ بیت.
  • پیش‌بینی اثرات کوتاه‌مدت و بلندمدت بر اکوسیستم فناوری.

پایان دوران تجهیزات چند صد هزار دلاری؛ خیزش Act-One برای بازتعریف بازیگری دیجیتال

در تاریخ جلوه‌های ویژه بصری (VFX) و صنعت پویانمایی، ضبط دقیق احساسات چهره (Facial Performance Capture) همواره یکی از پیچیده‌ترین و هزینه‌برترین چالش‌های فنی بوده است. از خلق شخصیت افسانه‌ای گالوم در ارباب حلقه‌ها تا کاراکترهای سه‌بعدی آواتار جیمز کامرون، دستیابی به انیمیشن طبیعی چهره مستلزم پوشیدن کلاه‌خودهای سنگین دارای دوربین‌های نزدیک، نصب ده‌ها نشانگر بازتابنده (Retro-reflective Markers) روی پوست صورت و ساعت‌ها پالایش دستی توسط متخصصان ریگ‌بندی بوده است. با این حال، شرکت نام‌آشنای رانوِی (Runway) با معرفی ابزار هوش مصنوعی Act-One، تمامی این زنجیره سنگین سخت‌افزاری را به چالش کشیده است.

ابزار Act-One که مستقیماً در زیرساخت مدل پرچمدار تولید ویدئوی Gen-3 Alpha ادغام شده است، به هر سازنده مستقل یا فیلم‌ساز اجازه می‌دهد تنها با ارائه دو ورودی پایه—یک ویدئوی ضبط‌شده با وب‌کم یا دوربین گوشی هوشمند از اجرای بازیگر و یک تصویر ایستا از کاراکتر مقصد—یک سکانس متحرک، پویا و سینمایی تولید نماید. این تحول بنیادین، همان‌طور که پیش‌تر در تحلیل مقایسه مدل‌های هوش مصنوعی ویدیو سورا و رانوِی به آن پرداخته بودیم، تمرکز هوش مصنوعی مولد را از ساخت ویدئوهای تصادفی متنی به سمت کنترل‌پذیری دقیق ژورنالیستی و کارگردانی مؤلف ارتقا داده است.

کالبدشکافی معماری فنی در Gen-3 Alpha؛ استخراج لندمارک‌ها در فضای نهان ترنسفورمرهای نفوذی

در پایپ‌لاین‌های سنتی بینایی کامپیوتر، انتقال حالات چهره بر مبنای برازش مش‌های سه‌بعدی صلب یا استخراج پارامترهای واحدهای کنش چهره (FACS Action Units) صورت می‌پذیرفت؛ رویکردی که در مواجهه با سبک‌های نامتعارف نقاشی، کاراکترهای فانتزی غیرانسانی یا تغییرات زاویه سر دچار شکست و خطاهای دفرمه شدن شدید (Mesh Distortion) می‌شد. رانوِی در طراحی Act-One این رویکرد مکانیکی را کنار گذاشته و از قابلیت‌های استنتاجی فضای نهان (Latent Space) در معماری ترنسفورمرهای نفوذی (Diffusion Transformers - DiT) بهره گرفته است.

در این سیستم، شبکه عصبی ویدیوی ورودی را فریم به فریم تحلیل کرده و به جای ترسیم نقاط هندسی ثابت، بردارهای حرکتی، جهت‌گیری نگاه چشم‌ها (Eye-Gaze Direction)، انقباض ماهیچه‌های دور لب و تغییرات ظریف پیشانی را در قالب بردارهای نهان زمانی-مکانی رمزگذاری می‌کند. سپس مدل مولد با درک مشخصات فرمی تصویر کاراکتر مقصد—از یک طراحی دوبعدی سیاه‌قلم یا نقاشی آبرنگ گرفته تا یک هیولای فضایی سه‌بعدی—این بردارها را بر استخوان‌بندی مفهومی آن کاراکتر نگاشت می‌نماید. عملکرد خیره‌کننده این سامانه در درک زمینه تصویری شباهت بالایی به زیرساخت‌های مدل‌های بینایی-زبانی یا VLM دارد که درک چندوجهی تصویر و حرکت را هم‌گام می‌سازند.

اینفوگرافیک معماری ۴ ستون بنیادین هوش مصنوعی Runway Act-One شامل ضبط بدون نشانگر با دوربین معمولی، ردیابی حالت‌ها در فضای نهان ترنسفورمرهای نفوذی، انطباق بین‌سبکی هویت و همگام‌سازی صوت و تصویر
کالبدشکافی ساختار فنی Runway Act-One: ارزیابی ۴ رکن اساسی تحول در موشن‌کپچر چهره شامل ثبت حرکات با وب‌کم ساده، استخراج لندمارک‌ها در فضای نهان مدل Gen-3 Alpha، انتقال بازیگری زنده به انواع سبک‌های هنری (انیمه، ۳D و هایپررئال)، و تطبیق صوتی-تصویری بدون نیاز به پس‌پردازش مجزا

تسخیر خردحالت‌های عاطفی و همگام‌سازی صوت؛ خداحافظی با پدیده دره وهمی

یکی از برجسته‌ترین نقاط قوت Act-One که آن را از راهکارهای ساده لب‌زنی (Lip-Syncing) مجزا می‌کند، توانایی خارق‌العاده آن در ثبت و انتقال خردحالت‌های چهره (Micro-expressions) است. انیماتورها می‌دانند که احساس واقعی یک کاراکتر نه در کلمات اداشده، بلکه در تردید یک پلک زدن، لرزش گوشه لب، بالا رفتن جزئی ابرو هنگام شگفتی یا تغییر شدت نگاه نهفته است. سیستم‌های پیشین معمولاً خروجی‌هایی بی‌روح، مکانیکی و اصطلاحاً درون دره وهمی (Uncanny Valley) تولید می‌کردند؛ اما Act-One تمام حس و حال درونی، لحن کلام و پویایی بازیگر را به کاراکتر مقصد تزریق می‌کند.

علاوه بر این، هماهنگی زمانی صوت و تصویر (Audio-Visual Temporal Synchronization) به صورت درونی در این ابزار تعبیه شده است. زمانی که بازیگر دیالوگی را با صدایی خاص بیان می‌کند، انطباق باز و بسته شدن دهان، سرعت تلفظ حروف صامت و مصوت و حتی تنفس میان جملات به طور خودکار فریم‌بندی می‌شود. این موضوع سازندگان را از ابزارهای شخص ثالث پس‌پردازش صوت بی‌نیاز ساخته و گامی بزرگ در جهت تحقق سیستم‌های تولید فیلم یکپارچه، شبیه به پیشرفت‌های اخیر در کالبدشکافی هوش مصنوعی Meta Movie Gen با تولید همزمان تصویر و صوت، محسوب می‌شود.

انطباق سبک‌گریز بر کاراکترهای گوناگون؛ از انیمه ژاپنی تا تندیس‌های رنسانس و استاپ‌موشن

یکی از شگفت‌انگیزترین ابعاد فنی Act-One، بی‌تفاوتی آن نسبت به سبک هنری تصویر مرجع (Style-Agnostic Retargeting) است. فرقی نمی‌کند کاراکتر انتخابی شما یک پرتره هایپررئال از یک چهره تخیلی باشد که با ابزارهای نوین نظیر کالبدشکافی هوش مصنوعی تولید تصویر Recraft V3 خلق شده است، یا یک کاراکتر انیمیشنی سبک کمیک‌بوک، یا تندیسی مرمری از دوران باستان؛ سیستم به شکلی اعجاب‌انگیز خطوط چهره را در راستای هویت بصری همان اثر متحرک می‌سازد.

این قابلیت به انیماتورها اجازه می‌دهد تنها با طراحی یک فریم کلیدی (Keyframe) از ظاهر شخصیت خود، اجرای بازیگر زنده را روی آن فریم تابانده و انیمیشن‌های چندثانیه‌ای پیوسته با نرخ فریم بالا و بدون فلیکر (Temporal Flickering) تولید نمایند. این دگرگونی، فرایند طاقت‌فرسای فریم به فریم کشیدن انیمیشن در استودیوهای کلاسیک را به یک پایپ‌لاین تعاملی تبدیل کرده و زمان تولید هر شات را از چندین هفته به چند دقیقه کاهش داده است.

چالش‌های فنی، محدودیت‌های زاویه دید و الزامات حقوقی در صنعت سینما

علی‌رغم تمام ستایش‌ها، Act-One نیز مانند هر فناوری نوپای دیگری دارای مرزها و محدودیت‌های عملیاتی است. از منظر فنی، بالاترین درجه دقت این مدل در زوایای روبه‌رو (Frontal Views) و نیم‌رخ مایل ثبت می‌شود. در صورتی که بازیگر سر خود را به طور کامل بچرخاند یا دست‌ها و اشیا روی صورت قرار گیرند (Occlusion)، امکان افت موقت ردیابی یا تغییر فرم چشم‌ها وجود دارد. هم‌چنین کاراکترهای با ساختار چهره کاملاً غیرانسانی (مانند موجودات بدون دهان یا هیولاهای چندچشم) ممکن است نیازمند پرامپت‌های کمکی و هدایت دقیق‌تر برداری باشند.

از منظر حقوقی و اخلاقی نیز، ورود ابزارهایی با این سطح از توانمندی به هالیوود، مباحث جدی پیرامون حقوق تصویر بازیگران و اصالت بازیگری دیجیتال برانگیخته است. با این حال، همانند آنچه در بررسی مأموران هوشمند هوش مصنوعی؛ اتوماسیون کامل کارهای روزمره بیان کردیم، هوش مصنوعی در نقش یک دستیار فوق‌پیشرفته ظاهر می‌شود که نه برای حذف هنرمندان، بلکه برای تجهیز خلاق‌ترین ذهن‌های مستقل بدون سرمایه‌های کلان طراحی شده است.

جمع‌بندی تحریریه ماگ بیت؛ دموکراتیزه شدن هالیوود و تولد سینماگران تک‌نفره

عرضه ابزار Act-One توسط رانوِی، بیش از آنکه صرفاً یک ویژگی جدید نرم‌افزاری باشد، نمادی از یک تغییر پارادایم در تولید محتوای ویدئویی است. این فناوری نشان داد که دوران انحصار جلوه‌های ویژه بصری در دستان چند غول انیمیشن‌سازی جهانی به پایان رسیده و اکنون هر نویسنده، طراح کمیک یا کارگردان مستقل می‌تواند با یک لپ‌تاپ معمولی، جهان‌های خیالی خود را با بازیگری عمیق و پرکشش زنده کند.

از نگاه کارشناسان تحریریه ماگ بیت، ادغام کنترل‌های فیزیکی انسان با موتورهای مولد فضای نهان، الگوی آینده هوش مصنوعی چندرسانه‌ای است. پایداری حرکتی، وفاداری به هویت کاراکتر و هماهنگی گفتاری در Act-One نشان می‌دهد که در سال‌های پیش رو، شاهد تولد موج نوینی از انیمیشن‌ها و فیلم‌های مستقل خواهیم بود که با استانداردهای استودیویی ساخته شده‌اند، اما در اتاق یک استریمر یا خالق محتوای مستقل متولد گردیده‌اند.

این مطلب را با دوستانتان به اشتراک بگذارید
د
نوشته‌ی
دکتر کیانوش آراسته

روزنامه‌نگار حوزه‌ی هوش مصنوعی؛ علاقه‌مند به روایت آدم‌ها و تغییراتی که فناوری در زندگی روزمره ایجاد می‌کند.

همه‌ی مطالب
مطالب پیشنهادی ماگ بیت

بیشتر از هوش مصنوعی

مشاهده همه