7 أغسطس - فهم الوكلاء المرئيين

انضم إلينا في حدث افتراضي للاستماع إلى محادثات من خبراء حول الوضع الحالي للوكلاء المرئيين. **متى** 7 أغسطس 2025 الساعة 9 صباحًا بالتوقيت الباسيفيكي **أين** افتراضيًا. **[سجّل في Zoom.](https://voxel51.com/events/understanding-visual-agents-august-7-2025)** **القدرات والنماذج الأساسية للوكلاء العامين لأجهزة الكمبيوتر** مع اتجاهنا نحو مستقبل يمكن فيه للوكلاء اللغوية تشغيل البرامج، وتصفح الويب، وأتمتة المهام عبر البيئات الرقمية، تظهر تحديات كبيرة: كيف نبني نماذج أساسية يمكنها العمل كوكلاء عامين لأجهزة الكمبيوتر؟ في هذه المحاضرة، نستعرض تصميم مثل هذه الوكلاء — التي تجمع بين الرؤية، واللغة، والعمل، لفهم الواجهات المعقدة وتنفيذ نية المستخدم بدقة. نقدم OmniACT كدراسة حالة، وهي معيار يدعم هذا التصور من خلال دمج أوامر باللغة الطبيعية مع لقطات شاشة للواجهات ونصوص قابلة للتنفيذ لكل من البيئات المكتبية والويب. من خلال OmniACT، نفحص أداء أفضل النماذج اللغوية والنموذجية المتعددة اليوم، ونسلط الضوء على محدوديات السلوك الحالي للوكلاء، ونناقش اتجاهات البحث الضرورية للحاق بالفجوة نحو وكلاء رقميين قادرين حقًا وذوي غرض عام. *عن المتحدث* [راغاف كابور](https://www.linkedin.com/in/raghavkapoor16/) هو مهندس تعلم آلي في أدوبي، يعمل ضمن فريق خدمات العلامة التجارية، ويساهم في مشاريع رائدة في مجال ذكاء العلامات التجارية. يجمع عمله بين البحث وتعلم الآلة، مما يعكس خبرته العميقة في كلا المجالين. قبل انضمامه إلى أدوبي، حصل راغاف على درجة الماجستير من جامعة كارنيجي ميلون، حيث ركز بحثه على تعلم الآلة متعدد الوسائط والوكلاء القائمين على الويب. كما يمتلك خبرة صناعية من عمله كاستراتيجي في جولدمان ساكس إنديا. **BEARCUBS: تقييم قدرات وكلاء الويب في جمع المعلومات من العالم الحقيقي** تركز هذه المحاضرة على تحديات تقييم وكلاء الذكاء الاصطناعي في بيئات الويب الديناميكية، وتصميم وتنفيذ معيار BEARCUBS، والرؤى المستمدة من مقارنة أداء البشر مع الوكلاء. في هذا الحديث، سنناقش الفجوة الكبيرة في الأداء بين المستخدمين البشريين والحالة الحالية للوكلاء المتطورة، ونسلط الضوء على المجالات التي تحتاج إلى تحسين مستقبلي في قدرات التنقل في الويب واسترجاع المعلومات بواسطة الذكاء الاصطناعي. *عن المتحدث* [ييشياو سونغ](https://www.linkedin.com/in/songyixiao/) هي مرشحة دكتوراه في علوم الحاسوب بجامعة ماساتشوستس أمهرست. يتركز بحثها على تحسين تقييم أنظمة معالجة اللغة الطبيعية، لا سيما في تقييم الدقة والموثوقية في المحتوى الذي يولده الذكاء الاصطناعي. يشمل عملها تطوير أدوات ومعايير مثل VeriScore، وهي مقياس تلقائي لتقييم دقة توليد النصوص الطويلة، وBEARCUBS، وهو معيار لتقييم قدرة وكلاء الذكاء الاصطناعي على تحديد المعلومات الواقعية من محتوى الويب. **الوكلاء المرئيون: ما الذي يتطلبه بناء وكيل يمكنه التنقل في واجهات المستخدم الرسومية مثل البشر** سنستعرض الأطر المفاهيمية، والتطبيقات المحتملة، واتجاهات المستقبل في التقنيات التي يمكنها "الرؤية" و"العمل" باستقلالية متزايدة. وستتناول المناقشة كلًا من القيود الحالية والأفاق الواعدة في هذا المجال المتطور. *عن المتحدث* [هاربريت ساهوتا](https://www.linkedin.com/in/harpreetsahota204/) هو مهندس قرصان مقيم ومطور تعلم آلي، يمتلك شغفًا بالتعلم العميق والذكاء الاصطناعي التوليدي. لديه اهتمام عميق بنماذج استرجاع الإجابة (RAG)، والوكلاء، والذكاء الاصطناعي متعدد الوسائط. **تنفيذ وكيل عملي للذكاء الاصطناعي على أندرويد يعتمد على الرؤية** في هذه المحاضرة، سأشارككم التفاصيل العملية لتصميم وتنفيذ وكلاء الذكاء الاصطناعي على أندرويد، باستخدام [deki.](http://github.com/RasulOs/deki) من النظرية إلى التطبيق، واستخدام هذه الوكلاء في الصناعة/الإنتاج. للمستخدمين النهائيين - الاستخدام عن بُعد لأجهزة أندرويد أو لأتمتة المهام القياسية. مثل: * "اكتب لصديقي 'some_name' في واتساب أنني سأتأخر 15 دقيقة" * "افتح تويتر في المتصفح واكتب منشورًا عن 'something'" * "اقرأ أحدث إشعاراتي وقل لي إن كانت هناك أي إشعارات مهمة" * "اكتب منشورًا على LinkedIn عن 'something'" وللخبراء - لتمكين اختبار الوكلاء، وهو نوع جديد من الاختبارات أصبح ممكنًا فقط بسبب انتشار نماذج اللغة الكبيرة (LLMs) والوكلاء الاصطناعيين الذين يستخدمونها كنواة للتفكير. *عن المتحدث* [رسول عثمانبايلي](https://www.linkedin.com/in/rasulosmanbayli/) هو مطور أندرويد كبير في كابيتال بنك، باكو/أذربيجان. وهو أكبر بنك خاص في أذربيجان. قام بإنشاء deki، وهو نموذج لوصف الصور تم استخدامه كأساس لوكلاء ذكاء اصطناعي على أندرويد حققوا نتائج عالية في معيارين مختلفين: Android World و Android Control. عمل سابقًا في إسطنبول/تركيا لدى شركات مختلفة كمطور أندرويد وخلفية تقنية. كما يمتلك درجة الماجستير من جامعة إسطنبول آيدن في إسطنبول/تركيا.