Nvidia تكشف عن Maxine AI Tech لتحسين جودة مكالمات الفيديو
طرحت Nvidia نظام Maxine ، وهو نظام دفق فيديو قائم على الذكاء الاصطناعي لتحسين جودة مكالمات الفيديو. إنها أداة للمطورين الذين يمكنهم تطبيقها على خدمات مكالمات الفيديو. يستخدم الذكاء الاصطناعي ومعالجة GPU المستندة إلى السحابة من Nvidia لتحسين جودة المكالمات مع الميزات المضافة.
تقول الشركة أن Maxine يمكن أن تساعد المطورين على تقليل استخدام عرض النطاق الترددي للفيديو ، والترجمة الحية ، ودعم تأثيرات الصوت والفيديو. نظرًا لأنها خدمة قائمة على السحابة ، يمكن للمستخدمين الحصول على نفس الميزات على هواتفهم الذكية وأجهزة الكمبيوتر المحمولة والأجهزة الأخرى.
ماذا تفعل Nvidia Maxine؟
كما ذكرنا ، Maxine عبارة عن منصة دفق فيديو قائمة على السحابة لتحسين جودة الفيديو أثناء المكالمات والاجتماعات. لمزيد من التوضيح ، فإنه يستخدم القدرات الحسابية للذكاء الاصطناعي لتقليل الضوضاء وإضافة ميزات جديدة إلى مكالمة الفيديو. بدءًا من ما تسميه Nvidia “الدقة الفائقة” ، فإنها تستخدم تقليل العناصر الأثرية المدعومة من AI لتحويل مقاطع الفيديو منخفضة الجودة إلى دقة عالية في الوقت الفعلي.
يستخدم ضغط الفيديو المستند إلى AI ، مما يقلل من استخدام النطاق الترددي إلى عُشر ما هو مطلوب لمعيار ضغط الفيديو H.264 الحالي.
يعمل Maxine على تحسين دقة الفيديو عن طريق نقل “نقاط مفاتيح” وجهك عبر الإنترنت بدلاً من شاشة كاملة من وحدات البكسل. هذا يعني أن الذكاء الاصطناعي سوف يقوم بفرز المعلومات التي يحتاجها ، ويعيد بناءها إلى فيديو بجودة أفضل في نهاية جهاز الاستقبال.
نشرت Nvidia أيضًا مقطع فيديو يعرض ميزات Denoise ووجه إعادة الرسوم المتحركة على Maxine. Denoise هي ميزة لإلغاء الضوضاء مدعومة بالذكاء الاصطناعي تهدف إلى تضخيم صوتك وتقليل ضوضاء الخلفية أثناء مكالمة الفيديو. تعمل إعادة الرسوم المتحركة للوجه على محاذاة وجهك تلقائيًا ، لذا يبدو أنك تنظر مباشرة إلى الكاميرا.
تستخدم إعادة الرسوم المتحركة أيضًا النقاط الرئيسية المعترف بها بواسطة AI لوجه الشخص وإعادة تنشيطها في نهاية جهاز الاستقبال باستخدام شبكات الخصومة التوليدية (GANs). يمكن استخدام إعادة الرسوم المتحركة لتحفيز التواصل البصري في مكالمة فيديو.
كما تتيح المنصة للمستخدمين التحدث مع Nvidia Jarvis وخدمات الذكاء الاصطناعي الأخرى للمحادثة. يشبه إلى حد كبير الذكاء الاصطناعي الخاص بـ Tony Stark الذي يحمل نفس الاسم ، فإن Jarvis عبارة عن محادثة ذكاء اصطناعي يمكنها إجراء ترجمات في الوقت الفعلي واقتراح تسميات توضيحية أثناء مكالمات الفيديو.
لمن هذا؟
مع Nvidia Maxine ، تعتمد الشركة بشكل كبير على عضلات الذكاء الاصطناعي. ماكسين غير متاح للمستهلكين النهائيين. إنها مجموعة أدوات للمطورين لتحسين مكالمات الفيديو على برامج الطرف الثالث. دعت الشركة المطورين للانضمام إلى برنامج الوصول المبكر .
