أخبرناك منذ فترة عن 10 مواقع لإنشاء مقاطع فيديو احترافية في دقائق قليلة باستخدام الذكاء الاصطناعي . نقدم لك هذه المرة معلومات حول مشروع غوغل الجديد، VideoPoet AI، البرنامج الذي يستخدم LLM لتحويل أي نص إلى فيديو.

VideoPoet هو نموذج لغة تجريبي كبير، أو LLM، يمكنه إنشاء مقاطع فيديو بناءً على مطالبة نصية. يعد هؤلاء من غوغل في ورقة العرض التقديمي VideoPoet أنه بفضلLLM  في هذا البرنامج، يمكن إنشاء أي مشهد خيالي يمكنك التفكير فيه وكتابته في ثوانٍ. إنه مثل استخدام DALL-E 3، ولكن بدلاً من إنشاء الصور، سيتم إنشاء مقاطع فيديو كاملة.

بالإضافة إلى إنشاء مقاطع الفيديو، يتيح لك VideoPoet AI إمكانية تحرير مقاطع الفيديو الموجودة بالفعل، على سبيل المثال، إذا كان لديك مقطع فيديو مقطوع به مشهد مفقود، يمكنك أن تطلب من Google AI ملء المساحة المفقودة بأي شيء تريد إضافته. كما يسمح لك بإنشاء مقاطع فيديو من صورة، على سبيل المثال، يمكنك إدخال صورة للموناليزا وتطلب من VideoPoet عمل فيديو لامرأة تتثاءب. وستكون النتيجة مقطع فيديو للموناليزا وهي تتثاءب في نفس بيئة الصورة التي أدخلتها.

هناك فرق رئيسي بين الذكاء الاصطناعي لإنشاء الفيديو الذي تم الإعلان عنه بالفعل من قبل شركات أخرى و VideoPoet AI. يعتمد هذا الاختلاف على طريقة العمل، نظرًا لأن الخيارات الأكثر إثارة للاهتمام الموجودة لإنشاء مقاطع فيديو باستخدام الذكاء الاصطناعي تعتمد على نموذج نشر مستقر لإنشاء المحتوى الذي تطلبه، كما يفعل Stable Video Diffusion، على سبيل المثال. بينما يستخدم VideoPoet برنامج LLM الخاص به لتحويل الصور ومقاطع الفيديو والصوت إلى رموز مميزة، ثم يقوم بتحليلها وتجميعها بناءً على توافقها.

ومن أجل تحقيق ذلك، قامت غوغل بشكل أساسي بتزويد VideoPoet AI بكمية كبيرة من المعلومات لفهم العلاقة بين النصوص والصور المختلفة. كما زودته أيضًا كمية كبيرة من المواد السمعية والبصرية لاستخدامها عند إنشاء ما تطلبه منه. وهذا لا يسمح لك فقط بإنشاء أي شيء يمكن أن يبتكره خيالك، بل يمكنك أيضًا تعديله بسهولة بحيث يتناسب الفيديو مع رؤيتك الأصلية.