تاريخ النشر: 21 نوفمبر 2024
بعد تلقّي العديد من المشاركات الرائعة في مسابقة مطوّري Gemini API، اخترنا الفائز بأفضل تطبيق ويب: ViddyScribe.
توضّح أداة ViddyScribe كيف يمكن لـ Gemini المساعدة في تسهيل الوصول إلى الفيديوهات على YouTube، وربما على منصات أخرى، من خلال إنشاء أوصاف صوتية لأي فيديو مخصّصة للأشخاص الذين يعانون ضعفًا في البصر.
الميزات وإمكانات Gemini
أنشأت ViddyScribe تطبيقًا مصمّمًا ليناسب المستخدمين أولاً. على الرغم من توفّر عدد من الحلول لإنشاء نصوص وفيديوهات تتضمّن وصفًا صوتيًا، أولت ViddyScribe الأولوية لإنشاء مخرجات تتيح الحصول على نتائج سريعة وتوفّر تجربة مستخدم ممتعة لجمهور محدّد، وهو الأشخاص الذين يعانون ضعفًا في البصر.
تستغرق إضافة تعليقات توضيحية يدويًا إلى الفيديوهات لتقديم تفاصيل إضافية لهذا الجمهور وقتًا طويلاً جدًا، وغالبًا ما يتم إهمالها. استخدمت ViddyScribe Gemini للمساعدة في إنشاء حلّ مخصّص يتجاوز إضافة بعض أوصاف الإطارات العشوائية إلى ملف نصي.
استخدمت ViddyScribe هندسة الطلبات للحصول على أفضل النتائج، حيث تم اختيار لغة السؤال وأسلوبه بما يتناسب مع Gemini 1.5 Pro. استخدم هذا الطلب أسلوب توجيه الطلبات عبر "سلسلة الأفكار" لطلب ما يلي:
- الغرض من الفيديو وسياقه
- أوصاف صوتية مخصّصة تستند إلى تحليل وإرشادات خاصة بالفيديو
- إعادة تنسيق الطوابع الزمنية والأوصاف للحصول على تنسيق يمكن توقّعه وثابت
سبب اختيارنا ViddyScribe
لقد اخترنا ViddyScribe لأنّه كان حلاً رائعًا لمشكلة حقيقية يواجهها المستخدمون.
وعلى الرغم من أنّهم وجدوا تطبيقات أخرى في السوق تقدّم وصفًا صوتيًا، إلا أنّهم شعروا بأنّ احتياجات الصم وضعاف البصر لم يتم فهمها بالكامل. وقد تعاون هؤلاء المطوّرون مع أشخاص حقيقيين يعانون هذه الإعاقات لتحديد احتياجاتهم بدقة في تطبيق الوصف الصوتي.
تختلف تجارب الأشخاص ذوي الاحتياجات الخاصة بشكل كبير، وقد تتضارب احتياجاتهم أحيانًا. بالإضافة إلى ذلك، يمكن أن تساعد الأوصاف الصوتية أيضًا في تسهيل وصول الأشخاص المصابين باضطرابات النمو العصبي وغيرهم من الذين يفضّلون قراءة نص الفيديو بدلاً من مشاهدته إلى هذه الفيديوهات.
نحن متحمّسون لرؤية كيف سيواصل المطوّرون تحسين ViddyScribe وتوسيع نطاق الجمهور والإمكانات في المستقبل.
مواصلة الابتكار باستخدام واجهات برمجة تطبيقات الذكاء الاصطناعي المدمجة
كان ViddyScribe مجرد أحد التطبيقات الرائعة العديدة التي أنشأتها باستخدام Gemini.
نحن نعمل على تطوير ذكاء اصطناعي مدمج: واجهات برمجة تطبيقات لمنصة الويب وميزات متصفّح مصمَّمة لدمج نماذج الذكاء الاصطناعي، بما في ذلك النماذج اللغوية الكبيرة (LLM)، مباشرةً في المتصفّح.
يمكنك استكشاف واجهات برمجة التطبيقات المتاحة لبدء إنشاء مواقع إلكترونية وتطبيقات ويب وإضافات Chrome فعّالة.
يمكنك مشاركة ما تصنعه معنا على @ChromiumDev أو مشاركته مع Chrome للمطوّرين على LinkedIn.