Résumé
Dans ce modèle de code, découvrez comment utiliser Cortex Certifai Toolkit pour créer des analyses afin d'évaluer les performances de plusieurs modèles prédictifs à l'aide d'IBM Watson Studio.
Description
L'explicabilité des modèles d'IA est une tâche difficile qui est simplifiée par Cortex Certifai. Le Cortex Certifai Tookit évalue les modèles d'IA pour leur robustesse, leur équité et leur explicabilité, et permet aux utilisateurs de comparer différents modèles ou versions de modèles pour ces qualités. Certifai peut être appliqué à n'importe quel modèle de boîte noire, y compris les modèles d'apprentissage automatique et les modèles prédictifs, et fonctionne avec une variété d'ensembles de données d'entrée.
Les spécialistes des données peuvent créer des définitions d'analyse de modèle, qui sont constituées de modèles entraînés que vous souhaitez évaluer pour les paramètres suivants:
- Mesure de performance (par exemple, précision)
- Robustesse: comment le modèle se généralise sur de nouvelles données
- L'équité par groupe, qui mesure le biais dans les données
- Explicabilité, qui mesure les explications fournies pour chaque modèle
- Explications, qui affichent le changement qui doit se produire dans un ensemble de données avec des restrictions données pour obtenir un résultat différent
Les décideurs commerciaux peuvent afficher la comparaison d'évaluation via des visualisations et des scores pour sélectionner les meilleurs modèles pour les objectifs commerciaux et pour déterminer si les modèles atteignent les seuils de robustesse, d'équité et d'explicabilité. Les scientifiques des données peuvent utiliser les résultats de l'évaluation à des fins d'analyse afin de fournir des modèles d'IA plus fiables.
Ce modèle de code montre comment utiliser Certifai Toolkit pour créer des analyses afin d'évaluer les performances de plusieurs modèles prédictifs à l'aide de la plate-forme IBM Watson Studio.
Flow
- Connectez-vous à IBM Watson Studio optimisé par Spark, lancez IBM Cloud Object Storage et créez un projet.
- Téléchargez le fichier de données .csv dans IBM Cloud Object Storage.
- Chargez le fichier de données dans le bloc-notes Watson Studio.
- Installez la boîte à outils Cortex Certifai dans le bloc-notes Watson Studio.
- Obtenez une visualisation pour l'explicabilité et l'interprétabilité du modèle d'IA pour les trois différents types d'utilisateurs.
Instructions
Retrouvez les étapes détaillées dans le README fichier. Ces étapes expliquent comment:
- Créez un compte avec IBM Cloud.
- Créez un nouveau projet Watson Studio.
- Ajoutez des données.
- Créez le cahier.
- Insérez les données en tant que DataFrame.
- Exécutez le cahier.
- Analysez les résultats.
- Compte
- AI
- selon une analyse de l’Université de Princeton
- LES MEILLEURS
- Boîte noire
- corps
- la performance des entreprises
- Change
- le cloud
- code
- contenu
- données
- ensemble de données
- Explicabilité
- flux
- Réservation de groupe
- Comment
- How To
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- identifier
- Y compris
- APPRENTISSAGE
- apprentissage
- machine learning
- modèle
- Stockage d'objets
- Patron de Couture
- performant
- plateforme
- Projet
- Résultats
- balayage
- scientifiques
- set
- storage
- utilisateurs
- Voir
- visualisation
- Watson
- Studio Watson
- vos contrats