Resumé
I dette kodemønster kan du lære, hvordan du bruger Cortex Certifai Toolkit til at oprette scanninger for at evaluere ydeevnen af flere prædiktive modeller ved hjælp af IBM Watson Studio.
Beskrivelse
Forklarligheden af AI-modeller er en vanskelig opgave, der er gjort enklere af Cortex Certifai. Cortex Certifai Tookit evaluerer AI-modeller for robusthed, retfærdighed og forklarlighed og giver brugerne mulighed for at sammenligne forskellige modeller eller modelversioner for disse kvaliteter. Certifai kan anvendes på enhver sort-boks-model, inklusive maskinlæringsmodeller og forudsigende modeller, og fungerer med en række inputdatasæt.
Dataforskere kan oprette modelscanningsdefinitioner, som består af trænede modeller, som du ønsker at evaluere for følgende parametre:
- Ydeevnemåling (f.eks. nøjagtighed)
- Robusthed: Hvordan modellen generaliserer på nye data
- Retfærdighed efter gruppe, som måler skævheden i dataene
- Forklarlighed, som måler forklaringerne til hver model
- Forklaringer, som viser den ændring, der skal ske i et datasæt med givne begrænsninger for at opnå et andet resultat
Forretningsbeslutningstagere kan se evalueringssammenligningen gennem visualiseringer og scoringer for at vælge de bedste modeller til forretningsmål og for at identificere, om modellerne opfylder tærsklerne for robusthed, retfærdighed og forklarlighed. Dataforskere kan bruge evalueringsresultaterne til analyse for at give mere troværdige AI-modeller.
Dette kodemønster demonstrerer, hvordan man bruger Certifai Toolkit til at oprette scanninger for at evaluere ydeevnen af flere prædiktive modeller ved hjælp af IBM Watson Studio-platformen.
Flow
- Log ind på IBM Watson Studio drevet af Spark, start IBM Cloud Object Storage, og opret et projekt.
- Upload .csv-datafilen til IBM Cloud Object Storage.
- Indlæs datafilen i Watson Studios notesbog.
- Installer Cortex Certifai Toolkit i Watson Studios notebook.
- Få visualisering for forklarlighed og fortolkning af AI-modellen for de tre forskellige typer brugere.
Instruktioner
Find de detaljerede trin i README fil. Disse trin forklarer, hvordan du:
- Opret en konto hos IBM Cloud.
- Opret et nyt Watson Studio-projekt.
- Tilføj data.
- Opret notesbogen.
- Indsæt dataene som DataFrame.
- Kør notesbogen.
- Analyser resultaterne.
- Konto
- AI
- analyse
- BEDSTE
- Sort kasse
- krop
- virksomhed
- lave om
- Cloud
- kode
- indhold
- data
- datasæt
- Forklarlighed
- flow
- gruppe
- Hvordan
- How To
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- identificere
- Herunder
- LÆR
- læring
- machine learning
- model
- Objektopbevaring
- Mønster
- ydeevne
- perron
- projekt
- Resultater
- scanne
- forskere
- sæt
- opbevaring
- brugere
- Specifikation
- visualisering
- Watson
- watson studie
- virker