Összegzésként
Ebben a kódmintában megtudhatja, hogyan használhatja a Cortex Certifai Toolkit vizsgálatokat több prediktív modell teljesítményének értékeléséhez az IBM Watson Studio használatával.
Leírás
Az AI-modellek magyarázhatósága nehéz feladat, amelyet a Cortex Certifai tesz egyszerűbbé. A Cortex Certifai Tookit értékeli a mesterséges intelligencia modellek robusztusságát, tisztességességét és magyarázhatóságát, és lehetővé teszi a felhasználók számára, hogy összehasonlítsák a különböző modelleket vagy modellváltozatokat e tulajdonságok szempontjából. A Certifai bármely feketedoboz-modellre alkalmazható, beleértve a gépi tanulási modelleket és a prediktív modelleket, és számos bemeneti adatkészlettel működik.
Az adattudósok modellszkennelési definíciókat hozhatnak létre, amelyek olyan betanított modellekből állnak, amelyeket a következő paraméterekre kíván kiértékelni:
- Teljesítménymutató (például Pontosság)
- Robusztusság: Hogyan általánosít a modell az új adatokon
- Méltányosság csoportonként, amely az adatok torzítását méri
- Magyarázatosság, amely az egyes modellekhez adott magyarázatokat méri
- Magyarázatok, amelyek azt a változást jelenítik meg, amelynek egy adathalmazban meg kell történnie adott korlátozásokkal, hogy más eredményt kapjunk
Az üzleti döntéshozók megtekinthetik az értékelések összehasonlítását vizualizációkon és pontszámokon keresztül, hogy kiválaszthassák az üzleti célokhoz legjobban illeszkedő modelleket, és megállapítsák, hogy a modellek megfelelnek-e a robusztusság, méltányosság és magyarázhatóság küszöbértékeinek. Az adattudósok az értékelési eredményeket elemzésre használhatják fel, hogy megbízhatóbb AI-modelleket állíthassanak elő.
Ez a kódminta bemutatja, hogyan lehet a Certifai Toolkit segítségével vizsgálatokat készíteni több prediktív modell teljesítményének értékeléséhez az IBM Watson Studio platform használatával.
Folyik
- Jelentkezzen be a Spark által üzemeltetett IBM Watson Studióba, kezdeményezze az IBM Cloud Object Storage szolgáltatást, és hozzon létre egy projektet.
- Töltse fel a .csv adatfájlt az IBM Cloud Object Storage szolgáltatásba.
- Töltse be az adatfájlt a Watson Studio notebookba.
- Telepítse a Cortex Certifai eszközkészletet a Watson Studio notebookba.
- Szerezzen vizualizációt az AI-modell magyarázhatóságához és értelmezéséhez a három különböző típusú felhasználó számára.
Utasítás
A részletes lépéseket megtalálja a README fájlt. Ezek a lépések megmagyarázzák, hogyan:
- Hozzon létre egy fiókot az IBM Cloud szolgáltatásban.
- Hozzon létre egy új Watson Studio projektet.
- Adatok hozzáadása.
- Készítse el a jegyzetfüzetet.
- Illessze be az adatokat DataFrame-ként.
- Futtassa a notebookot.
- Elemezze az eredményeket.
- Fiók
- AI
- elemzés
- BEST
- Fekete doboz
- test
- üzleti
- változik
- felhő
- kód
- tartalom
- dátum
- adatkészlet
- Magyarázatosság
- áramlási
- Csoport
- Hogyan
- How To
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- azonosítani
- Beleértve
- TANUL
- tanulás
- gépi tanulás
- modell
- Objektum tárolása
- Mintás
- teljesítmény
- emelvény
- program
- Eredmények
- beolvasás
- tudósok
- készlet
- tárolás
- Felhasználók
- Megnézem
- megjelenítés
- Watson
- Watson Stúdió
- művek