توليد الصور ومقاطع  الفيديو بالذكاء الاصطناعي يتطلب موارد كبرى مثل كروت رسومي قوية بحجم ذاكرة يبدأ من 12GB، لكن الاعتماد على كارت رسومي بحجم ذاكرة أقل من ذلك مثل 8GB أو 6GB يُعد أمرُا صعبًا، لكن هذا سيتغير مع تطبيق FramePack.

تطبيق FramePack أسهل مما نتوقع

يستطيع تطبيق FramePack توليد الصور ومقاطع الفيديو باستخدام سياق زمني محدد لمعالجة أكثر كفاءة، مما يتيح للمستخدمين إنشاء مقاطع فيديو أطول وبجودة أعلى. إذ يمكن لنموذج يضم 13 مليار معلمة، باستخدام تطبيق FramePack، إنشاء مقطع مدته 60 ثانية بالاعتماد على كارت رسومي يأتي بذاكرة حجمها 6GB فقط.

التقنية المستخدمة مع هذا التطبيق كانت من ابتكار vmin Zhang الذي كشف عنها في منصة GitHub، بالتعاون مع مانيش أغراوالا من جامعة ستانفورد. هدف هذه التقنية توليد الصور والفيديو بالذكاء الاصطناعي، المختلف مع هذه التقنية الجديدة أنها تستطيع توليد الصور باستخدام حجم منخفض من الذاكرة الخاصة بالكروت الرسومية.

يُعد تطبيق FramePack عبارة عن بنية شبكة عصبية تستخدم تقنيات تحسين متعددة المراحل لتمكين توليد الفيديو بالذكاء الاصطناعي. تتطلب نماذج الفيديو القياسية مجموعة كبيرة من ذاكرة VRAM الخاصة بالكارت، إذ يُعد حجم 12GB هو الحجم الموصى به. بالطبع، يمكنك استخدام ذاكرة بحجم أقل، لكن ذلك يأتي على حساب توليد مقاطع بمدة أقصر وجودة أقل وأوقات معالجة أطول.

بالإضافة إلى تقنيات التخفيف من تدهور جودة الصورة كلما كانت مدة المقطع أطول، يمتاز تطبيق FramePack بتوليد فيديو أطول دون حصول تأثير الكبير على الدقة. ويتطلب تطبيق FramePack كارت رسومي من سلسلة RTX 30 أو 40 أو 50 مع دعم FP16 و BF16. اللافت أن التطبيق لم يشير إلى دعم كروت AMD أو Intel، لكنه يدعم  نظام Linux أيضًا بجانب نظام ويندوز.

يمكن القول أن معظم كروت NVIDIA RTX تفي أو تتجاوز معيار التطبيق الذي يتطلب ذاكرة بحجم لا يقل عن 6GB. هل تريد الحصول على أفضل النتائج؟ يمكن للكارت الرسومي RTX 4090 إنتاج ما يصل إلى 0.6 إطار في الثانية باستخدام تقنية TeaCache.

بدلاً من الاعتماد على خدمات الطرف الثالث المكلفة، يمهد تطبيق FramePack الطريق لجعل توليد الفيديو بالذكاء الاصطناعي أكثر سهولة للمستهلك العادي. يمكنك تجربة هذا التطبيق من هنا إن كنت تمتلك كارت رسومي يحتوي على ذاكرة بحجم لا يقل عن 6GB.