Rezumat
În acest model de cod, aflați cum să utilizați setul de instrumente Cortex Certifai pentru a crea scanări pentru a evalua performanța mai multor modele predictive folosind IBM Watson Studio.
Descriere
Explicabilitatea modelelor AI este o sarcină dificilă care este simplificată de Cortex Certifai. Cortex Certifai Tookit evaluează modelele AI pentru robustețe, corectitudine și explicabilitate și permite utilizatorilor să compare diferite modele sau versiuni de model pentru aceste calități. Certifai poate fi aplicat oricărui model cutie neagră, inclusiv modele de învățare automată și modele predictive și funcționează cu o varietate de seturi de date de intrare.
Oamenii de știință de date pot crea definiții de scanare a modelelor, care sunt compuse din modele antrenate pe care doriți să le evaluați pentru următorii parametri:
- Valoarea performanței (de exemplu, acuratețe)
- Robustitate: Cum se generalizează modelul pe date noi
- Corectitudinea pe grup, care măsoară părtinirea datelor
- Explicabilitatea, care măsoară explicațiile oferite pentru fiecare model
- Explicații, care afișează modificarea care trebuie să apară într-un set de date cu restricții date pentru a obține un rezultat diferit
Factorii de decizie de afaceri pot vizualiza comparația evaluării prin vizualizări și scoruri pentru a selecta cele mai bune modele pentru obiectivele de afaceri și pentru a identifica dacă modelele îndeplinesc pragurile de robustețe, corectitudine și explicabilitate. Oamenii de știință de date pot folosi rezultatele evaluării pentru analiză pentru a oferi modele AI mai demne de încredere.
Acest model de cod demonstrează cum să utilizați Certifai Toolkit pentru a crea scanări pentru a evalua performanța mai multor modele predictive folosind platforma IBM Watson Studio.
Debit
- Conectați-vă la IBM Watson Studio alimentat de Spark, inițiați IBM Cloud Object Storage și creați un proiect.
- Încărcați fișierul de date .csv în IBM Cloud Object Storage.
- Încărcați fișierul de date în notebook-ul Watson Studio.
- Instalați setul de instrumente Cortex Certifai în notebook-ul Watson Studio.
- Obțineți vizualizare pentru explicabilitatea și interpretarea modelului AI pentru cele trei tipuri diferite de utilizatori.
Instrucțiuni
Găsiți pașii detaliați în README fişier. Acești pași explică cum se face:
- Creați un cont cu IBM Cloud.
- Creați un nou proiect Watson Studio.
- Adăugați date.
- Creați caietul.
- Introduceți datele ca DataFrame.
- Rulați caietul.
- Analizează rezultatele.
- Cont
- AI
- analiză
- CEL MAI BUN
- Cutie neagră
- corp
- afaceri
- Schimbare
- Cloud
- cod
- conţinut
- de date
- set de date
- Explicabilitate
- debit
- grup
- Cum
- Cum Pentru a
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- identifica
- Inclusiv
- AFLAȚI
- învăţare
- masina de învățare
- model
- Depozitarea obiectelor
- Model
- performanță
- platformă
- proiect
- REZULTATE
- scanare
- oamenii de stiinta
- set
- depozitare
- utilizatorii
- Vizualizare
- vizualizare
- Watson
- Studio Watson
- fabrică