كشفت شركة الفيديوهات الصينية القصيرة كوايشو تكنولوجي Kuaishou Technology، عن تطبيق ذكاء اصطناعي جديد لتحويل النص إلى فيديو المسمى كلينج Kling.
موضوعات مقترحة
وقالت الشركة إن Kling أصبح متاحًا بالفعل للمستخدمين من خلال قائمة الانتظار، على عكس Sora.
مقاطع فيديو عالية الوضوح
يستطيع Kling إنتاج مقاطع فيديو عالية الوضوح بدقة 1080 بكسل يمكن أن تستمر لمدة تصل إلى دقيقتين، مشيرة إلى أنه يستخدم تقنية مشابهة لـ Sora.
ويعتمد Kling على بنية Diffusion Transformer ويستطيع ترجمة المطالبات النصية إلى صور وفيديوهات حية، كما يستطيع النموذج إنشاء حركات واقعية واسعة النطاق تحاكي بشكل أساسي خصائص العالم المادي.
ويستخدم نموذج Kling عملية إعادة بناء الوجه والجسم ثلاثية الأبعاد المتقدمة المدعومة بتقنية 3D VAE الخاصة بالشركة، مما يتيح للمستخدمين إنشاء مقاطع فيديو بنسب عرض إلى ارتفاع مختلفة.
تحويل النص إلى فيديو
أصدرت الشركة مقطع فيديو تجريبيًا يعرض قدرة Kling على إنشاء مقطع فيديو تصل مدته إلى دقيقتين بجودة 30 إطارًا في الثانية.
من ناحية أخرى، يتمكن Sora فقط من إنشاء مقاطع فيديو مدتها دقيقة واحدة. واستنادًا إلى العينات المنشورة على منصة "إكس"، يبدو أن مقاطع الفيديو التي أنشأها Kling تحاكي بدقة الخصائص الفيزيائية في العالم الحقيقي.
وتجدر الإشارة إلى أن Kling ليس النموذج الوحيد لتحويل النص إلى فيديو من الصين.
ففي أبريل، تم إصدار Vidu AI، وهو نموذج تحويل النص إلى فيديو قادر على إنتاج مقاطع فيديو مدتها 16 ثانية بدقة 1080 بكسل.