نبذة عامة
في نمط الكود هذا ، تعرف على كيفية استخدام مجموعة أدوات Cortex Certifai Toolkit لإنشاء عمليات مسح لتقييم أداء النماذج التنبؤية المتعددة باستخدام IBM Watson Studio.
الوصف
تعد إمكانية شرح نماذج الذكاء الاصطناعي مهمة صعبة يتم تسهيلها بواسطة Cortex Certifai. تقوم Cortex Certifai Tookit بتقييم نماذج الذكاء الاصطناعي من حيث المتانة والإنصاف وإمكانية الشرح ، وتسمح للمستخدمين بمقارنة النماذج المختلفة أو إصدارات النماذج لهذه الصفات. يمكن تطبيق Certifai على أي نموذج من نماذج الصندوق الأسود بما في ذلك نماذج التعلم الآلي والنماذج التنبؤية ، ويعمل مع مجموعة متنوعة من مجموعات بيانات الإدخال.
يمكن لعلماء البيانات إنشاء تعريفات مسح ضوئي للنماذج ، والتي تتكون من نماذج مدربة تريد تقييمها للمعلمات التالية:
- مقياس الأداء (على سبيل المثال ، الدقة)
- المتانة: كيف يعمم النموذج على البيانات الجديدة
- العدالة حسب المجموعة ، والتي تقيس التحيز في البيانات
- القابلية للتفسير ، والتي تقيس التفسيرات المقدمة لكل نموذج
- التفسيرات ، التي تعرض التغيير الذي يجب أن يحدث في مجموعة بيانات مع قيود معينة للحصول على نتيجة مختلفة
يمكن لصانعي القرار في الأعمال عرض مقارنة التقييم من خلال التصورات والنتائج لاختيار أفضل النماذج لأهداف العمل وتحديد ما إذا كانت النماذج تلبي حدود المتانة والإنصاف وإمكانية الشرح. يمكن لعلماء البيانات استخدام نتائج التقييم للتحليل لتقديم المزيد من نماذج الذكاء الاصطناعي الموثوقة.
يوضح نمط الكود هذا كيفية استخدام Certifai Toolkit لإنشاء عمليات مسح لتقييم أداء النماذج التنبؤية المتعددة باستخدام النظام الأساسي IBM Watson Studio.
التدفق
- قم بتسجيل الدخول إلى IBM Watson Studio المدعوم من Spark ، وابدأ IBM Cloud Object Storage ، وأنشئ مشروعًا.
- تحميل ملف بيانات .csv إلى IBM Cloud Object Storage.
- قم بتحميل ملف البيانات في دفتر ملاحظات Watson Studio.
- قم بتثبيت مجموعة أدوات Cortex Certifai Toolkit في دفتر Watson Studio المحمول.
- احصل على تصور لقابلية الشرح والتفسير لنموذج الذكاء الاصطناعي لثلاثة أنواع مختلفة من المستخدمين.
تعليمات
ابحث عن الخطوات التفصيلية في README ملف. تشرح هذه الخطوات كيفية:
- قم بإنشاء حساب مع IBM Cloud.
- إنشاء مشروع Watson Studio جديد.
- إضافة البيانات.
- قم بإنشاء دفتر الملاحظات.
- أدخل البيانات كـ DataFrame.
- قم بتشغيل دفتر الملاحظات.
- تحليل النتائج.