جوجل تكشف النقاب عن Lumiere: نموذج الذكاء الاصطناعي ثوري لإنشاء الفيديو في الوقت الفعلي
Summary:
كشف باحثو Google النقاب عن Lumiere ، وهو نموذج نشر جديد يمكنه إنشاء وتعديل مقاطع فيديو الذكاء الاصطناعي واقعية على الفور من نص أو صور ثابتة. ينظر إلى هذا النموذج الخارق على أنه يغير قواعد اللعبة في تقنية الذكاء الاصطناعي الفيديو ، ويميز نفسه بنهج التمرير الفردي لإنشاء الفيديو عن نماذج الذكاء الاصطناعي الحالية. بناء على مجموعة بيانات من 30 مليون مقطع فيديو وتعليق ، يمكن ل Lumiere حاليا إنتاج 80 إطارا بسرعة 16 إطارا في الثانية.
كشف فريق علماء Google النقاب عن مشروعهم Lumiere ، وهو نموذج نشر جديد يمكنه إنشاء مقاطع فيديو الذكاء الاصطناعي واقعية من النص أو الصور الثابتة ، بما في ذلك التعديلات المتنافسة أثناء التنقل. تتخصص Lumiere في تصوير "الحركة الأصيلة والمتنوعة والمتسقة" باستخدام "بنية Space-Time U-Net" ، مما يسمح لها بإنشاء مقطع فيديو كامل على الفور من خلال تمريرة واحدة من النموذج. حققت Google تقدما غير عادي في تقنية الفيديو الذكاء الاصطناعي من خلال نموذج الانتشار هذا ، Lumiere ، مما يجعل عام 2024 عاما محوريا لفيديو الذكاء الاصطناعي.
في التقرير العلمي ، أوضح الباحثون أن: "نموذجنا يستخدم أخذ العينات المكانية والزمانية بشكل حاسم ، ويعتمد على نموذج نشر النص إلى صورة مدرب مسبقا لإنتاج فيديو معدل إطار كامل ومنخفض الدقة على الفور ، أثناء معالجته في مقياس الزمكان المتعدد ". يشير هذا إلى أنه يمكن للمستخدمين إدخال وصف نصي لمحتوى الفيديو المطلوب أو تحميل صورة ثابتة مع أمر لإنشاء فيديو مباشر. تم تشبيه Lumiere ب ChatGPT ، ولكن مع القدرات الإضافية لإنشاء الفيديو والأسلوب والتحرير والرسوم المتحركة من النصوص والصور ، كما تقترح الورقة. تميز الطريقة الفريدة لفريق Google في استخدام تمريرة واحدة للتعامل مع البيانات المتعلقة بالوقت في إنشاء الفيديو Lumiere عن مولدات الفيديو الذكاء الاصطناعي الحالية مثل Pika و Runway. Related: الذكاء الاصطناعي التزييف العميق يخدع المواطنين والسياسيين قبل الانتخابات الأمريكية 2024 - "اعتقدت أنه حقيقي" تمت مشاركة عينة من عرض لقدرات لوميير على X بواسطة هيلا شيفر ، وهي طالبة باحثة تعاونت في تطوير النموذج مع Google.
تم تطوير Lumiere استنادا إلى مجموعة بيانات من 30 مليون مقطع فيديو جنبا إلى جنب مع التسميات التوضيحية الوصفية. ومع ذلك ، لم تتم الإشارة إلى مصدر بيانات الفيديو ، وهي قضية مثيرة للجدل في مجال قانون الذكاء الاصطناعي وحقوق الطبع والنشر ، بعد. في الوقت الحاضر ، النموذج قادر على إنتاج 80 إطارا بسرعة 16 إطارا في الثانية. أشاد المستخدمون على X بإنجاز Google باعتباره "رائعا" و "متطورا" ، ويتوقعون زيادة كبيرة في إنشاء الفيديو في العام المقبل.
مجلة: مختارات من الرموز المشفرة + الذكاء الاصطناعي ، العقود المطلوبة ل AGI ، توسيع Galaxy الذكاء الاصطناعي إلى 100M الهواتف: الذكاء الاصطناعي Eye.
Published At
1/25/2024 5:00:00 PM
Disclaimer: Algoine does not endorse any content or product on this page. Readers should conduct their own research before taking any actions related to the asset, company, or any information in this article and assume full responsibility for their decisions. This article should not be considered as investment advice. Our news is prepared with AI support.
Do you suspect this content may be misleading, incomplete, or inappropriate in any way, requiring modification or removal?
We appreciate your report.