Sommario
In questo pattern di codice, scopri come utilizzare Cortex Certifai Toolkit per creare scansioni per valutare le prestazioni di più modelli predittivi utilizzando IBM Watson Studio.
Descrizione
La spiegabilità dei modelli di intelligenza artificiale è un compito difficile reso più semplice da Cortex Certifai. Il Cortex Certifai Tookit valuta i modelli di intelligenza artificiale per robustezza, correttezza e spiegabilità e consente agli utenti di confrontare diversi modelli o versioni di modelli per queste qualità. Certifai può essere applicato a qualsiasi modello di scatola nera, inclusi modelli di apprendimento automatico e modelli predittivi, e funziona con una varietà di set di dati di input.
I data scientist possono creare definizioni di scansione del modello, che sono costituite da modelli addestrati che si desidera valutare per i seguenti parametri:
- Metrica delle prestazioni (ad esempio, Precisione)
- Robustezza: come il modello generalizza su nuovi dati
- Equità per gruppo, che misura la distorsione nei dati
- Explainability, che misura le spiegazioni fornite per ciascun modello
- Spiegazioni, che mostrano la modifica che deve verificarsi in un set di dati con determinate restrizioni per ottenere un risultato diverso
I responsabili delle decisioni aziendali possono visualizzare il confronto della valutazione attraverso visualizzazioni e punteggi per selezionare i modelli migliori per gli obiettivi aziendali e per identificare se i modelli soddisfano le soglie di robustezza, correttezza e spiegabilità. I data scientist possono utilizzare i risultati della valutazione per l'analisi per fornire modelli di IA più affidabili.
Questo modello di codice dimostra come utilizzare Certifai Toolkit per creare scansioni per valutare le prestazioni di più modelli predittivi utilizzando la piattaforma IBM Watson Studio.
Flow
- Accedi a IBM Watson Studio con tecnologia Spark, avvia IBM Cloud Object Storage e crea un progetto.
- Carica il file di dati .csv su IBM Cloud Object Storage.
- Carica il file di dati nel notebook Watson Studio.
- Installa Cortex Certifai Toolkit nel notebook Watson Studio.
- Ottieni la visualizzazione per la spiegabilità e l'interpretabilità del modello AI per i tre diversi tipi di utenti.
Istruzioni
Trova i passaggi dettagliati in README file. Questi passaggi spiegano come:
- Crea un account con IBM Cloud.
- Crea un nuovo progetto Watson Studio.
- Aggiungi dati.
- Crea il taccuino.
- Inserisci i dati come DataFrame.
- Esegui il notebook.
- Analizza i risultati.
- Il mio account
- AI
- .
- MIGLIORE
- Scatola nera
- stile di vita
- affari
- il cambiamento
- Cloud
- codice
- contenuto
- dati
- set di dati
- Spiegabilità
- flusso
- Gruppo
- Come
- Tutorial
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- identificare
- Compreso
- IMPARARE
- apprendimento
- machine learning
- modello
- Storage degli oggetti
- Cartamodello
- performance
- piattaforma
- progetto
- Risultati
- scansione
- scienziati
- set
- conservazione
- utenti
- Visualizza
- visualizzazione
- Watson
- Studio Watson
- lavori