Povzetek
V tem vzorcu kode se naučite, kako uporabljati Cortex Certifai Toolkit za ustvarjanje pregledov za ovrednotenje zmogljivosti več napovednih modelov z uporabo IBM Watson Studio.
Opis
Razložljivost modelov AI je težka naloga, ki jo poenostavlja Cortex Certifai. Cortex Certifai Tookit ocenjuje modele AI glede robustnosti, poštenosti in razložljivosti ter uporabnikom omogoča primerjavo različnih modelov ali različic modelov glede teh lastnosti. Certifai je mogoče uporabiti za kateri koli model črne skrinjice, vključno z modeli strojnega učenja in napovednimi modeli, in deluje z različnimi nizi vhodnih podatkov.
Podatkovni znanstveniki lahko ustvarijo definicije skeniranja modela, ki so sestavljene iz usposobljenih modelov, ki jih želite oceniti za naslednje parametre:
- Meritev uspešnosti (na primer natančnost)
- Robustnost: kako model posplošuje nove podatke
- Pravičnost po skupini, ki meri pristranskost podatkov
- Razložljivost, ki meri razlage, podane za vsak model
- Pojasnila, ki prikazujejo spremembo, ki se mora zgoditi v nizu podatkov z danimi omejitvami, da se doseže drugačen rezultat
Nosilci poslovnih odločitev si lahko ogledajo primerjavo vrednotenja prek vizualizacij in rezultatov, da izberejo najboljše modele za poslovne cilje in ugotovijo, ali modeli dosegajo pragove za robustnost, pravičnost in razložljivost. Podatkovni znanstveniki lahko rezultate vrednotenja uporabijo za analizo, da zagotovijo bolj zaupanja vredne modele AI.
Ta vzorec kode prikazuje, kako uporabiti komplet orodij Certifai Toolkit za ustvarjanje pregledov za ovrednotenje zmogljivosti več napovednih modelov z uporabo platforme IBM Watson Studio.
Pretok
- Prijavite se v IBM Watson Studio, ki ga poganja Spark, zaženite IBM Cloud Object Storage in ustvarite projekt.
- Naložite podatkovno datoteko .csv v IBM Cloud Object Storage.
- Naložite podatkovno datoteko v prenosni računalnik Watson Studio.
- Namestite Cortex Certifai Toolkit v prenosni računalnik Watson Studio.
- Pridobite vizualizacijo za razložljivost in interpretabilnost modela AI za tri različne vrste uporabnikov.
navodila
Podrobne korake poiščite v README mapa. Ti koraki pojasnjujejo, kako:
- Ustvarite račun z IBM Cloud.
- Ustvarite nov projekt Watson Studio.
- Dodajte podatke.
- Ustvarite zvezek.
- Vstavite podatke kot DataFrame.
- Zaženite zvezek.
- Analizirajte rezultate.
- Račun
- AI
- Analiza
- BEST
- Črna škatla
- telo
- poslovni
- spremenite
- Cloud
- Koda
- vsebina
- datum
- nabor podatkov
- Pojasnjevanje
- Pretok
- skupina
- Kako
- Kako
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- identificirati
- Vključno
- UČITE
- učenje
- strojno učenje
- Model
- Shranjevanje objektov
- Vzorec
- performance
- platforma
- Projekt
- Rezultati
- skeniranje
- Znanstveniki
- nastavite
- shranjevanje
- Uporabniki
- Poglej
- vizualizacija
- Watson
- Studio Watson
- deluje