Tổng kết
Trong mẫu mã này, hãy tìm hiểu cách sử dụng Bộ công cụ Cortex Certifai để tạo các bản quét nhằm đánh giá hiệu suất của nhiều mô hình dự đoán bằng cách sử dụng IBM Watson Studio.
Mô tả
Khả năng giải thích của các mô hình AI là một nhiệm vụ khó khăn được Cortex Certifai làm cho đơn giản hơn. Cortex Certifai Tookit đánh giá các mô hình AI về độ mạnh mẽ, công bằng và khả năng giải thích, đồng thời cho phép người dùng so sánh các mô hình hoặc phiên bản mô hình khác nhau cho những phẩm chất này. Certifai có thể được áp dụng cho bất kỳ mô hình hộp đen nào bao gồm mô hình máy học và mô hình dự đoán, đồng thời hoạt động với nhiều bộ dữ liệu đầu vào khác nhau.
Các nhà khoa học dữ liệu có thể tạo các định nghĩa quét mô hình, bao gồm các mô hình được đào tạo mà bạn muốn đánh giá cho các tham số sau:
- Chỉ số hiệu suất (ví dụ: Độ chính xác)
- Tính mạnh mẽ: Cách mô hình tổng quát hóa trên dữ liệu mới
- Công bằng theo nhóm, đo lường sự thiên lệch trong dữ liệu
- Khả năng giải thích, đo lường các giải thích được cung cấp cho mỗi mô hình
- Giải thích, hiển thị sự thay đổi phải xảy ra trong tập dữ liệu với các hạn chế nhất định để có được một kết quả khác
Các nhà ra quyết định kinh doanh có thể xem so sánh đánh giá thông qua hình dung và điểm số để chọn ra các mô hình tốt nhất cho các mục tiêu kinh doanh và xác định xem các mô hình có đáp ứng các ngưỡng về tính mạnh mẽ, công bằng và khả năng giải thích hay không. Các nhà khoa học dữ liệu có thể sử dụng kết quả đánh giá để phân tích nhằm cung cấp các mô hình AI đáng tin cậy hơn.
Mẫu mã này trình bày cách sử dụng Bộ công cụ Certifai để tạo các bản quét nhằm đánh giá hiệu suất của nhiều mô hình dự đoán bằng cách sử dụng nền tảng IBM Watson Studio.
Dòng chảy
- Đăng nhập vào IBM Watson Studio được hỗ trợ bởi Spark, khởi tạo IBM Cloud Object Storage và tạo một dự án.
- Tải tệp dữ liệu .csv lên IBM Cloud Object Storage.
- Tải tệp dữ liệu vào sổ ghi chép Watson Studio.
- Cài đặt Bộ công cụ Cortex Certifai trong sổ ghi chép Watson Studio.
- Nhận trực quan về khả năng giải thích và khả năng diễn giải của mô hình AI cho ba loại người dùng khác nhau.
Hướng Dẫn
Tìm các bước chi tiết trong README tập tin. Các bước đó giải thích cách:
- Tạo tài khoản với IBM Cloud.
- Tạo một dự án Watson Studio mới.
- Thêm dữ liệu.
- Tạo sổ ghi chép.
- Chèn dữ liệu dưới dạng DataFrame.
- Chạy sổ ghi chép.
- Phân tích kết quả.
- Tài khoản
- AI
- phân tích
- BEST
- Hộp đen
- thân hình
- kinh doanh
- thay đổi
- đám mây
- mã
- nội dung
- dữ liệu
- tập dữ liệu
- Giải thích
- dòng chảy
- Nhóm
- Độ đáng tin của
- Hướng dẫn
- HTTPS
- IBM
- Đám mây của IBM
- IBM Watson
- xác định
- Bao gồm
- LEARN
- học tập
- học máy
- kiểu mẫu
- Lưu trữ đối tượng
- Họa tiết
- hiệu suất
- nền tảng
- dự án
- Kết quả
- quét
- các nhà khoa học
- định
- là gắn
- Người sử dụng
- Xem
- hình dung
- Watson
- Phòng thu Watson
- công trinh