我们都希望看到我们理想的人类价值观反映在我们的技术中。我们希望人工智能 (AI) 等技术不会欺骗我们、不会歧视我们,并且能够安全地供我们和我们的孩子使用。然而,许多人工智能创造者目前因模型中暴露的偏见、不准确和有问题的数据实践而面临强烈反对。这些问题需要的不仅仅是技术、算法或基于人工智能的解决方案。事实上,需要一种整体的社会技术方法。
数学证明了一个强有力的真理
所有预测模型(包括人工智能)在结合不同的人类智能和经验时都会更加准确。这不是一个意见;而是一个观点。它具有经验有效性。考虑 多样性预测定理。简而言之,当一个群体的多样性很大时,群体的错误就很小——支持“群体的智慧”的概念。一项有影响力的研究表明,不同的低能力问题解决者群体可以胜过高能力问题解决者群体(洪和佩奇,2004).
用数学语言来说: 方差越大,平均值就越标准。 方程如下所示:
A 进一步研究 提供了更多的计算来完善明智群体的统计定义,包括对其他成员的预测的无知以及将那些有预测的人纳入其中 最大程度地不同 (负相关)预测或判断。因此,提高预测的不仅仅是数量,还有多样性。这种见解可能如何影响人工智能模型的评估?
模型(英寸)精度
引用一句常见的格言,所有模型都是错误的。这在统计、科学和人工智能领域都是如此。缺乏领域专业知识而创建的模型可能会导致 错误 输出。
如今,一小群同质的人决定使用哪些数据来训练生成式人工智能模型,这些数据来自于英语的来源。 “对于世界上 6,000 多种语言中的大多数来说,可用的文本数据不足以训练大规模基础模型”(摘自“论基础模型的机遇与风险”,Bommasani 等人,2022)。
此外,模型本身是根据有限的架构创建的:“现在几乎所有最先进的 NLP 模型都是从几个基础模型之一改编而来的,例如 BERT、RoBERTa、BART、T5 等。虽然这种同质化产生了极高的杠杆作用(基础模型的任何改进都可以为整个 NLP 带来立竿见影的好处),但它也是一种责任;所有人工智能系统都可能继承一些基础模型的相同问题偏差(博马萨尼等人。)“
为了让生成式人工智能更好地反映其所服务的多元化社区,必须在模型中表示更广泛的人类数据。
评估模型准确性与评估偏差密切相关。我们必须问,该模型的目的是什么以及它是为谁优化的?例如,考虑谁从内容推荐算法和搜索引擎算法中受益最多。利益相关者可能有截然不同的利益和目标。算法和模型需要贝叶斯误差的目标或代理:模型必须改进的最小误差。该代理通常是一个人,例如具有领域专业知识的主题专家。
一个非常人性化的挑战:在模型采购或开发之前评估风险
新兴的人工智能法规和行动计划越来越强调算法影响评估形式的重要性。这些表格的目标是捕获有关人工智能模型的关键信息,以便治理团队可以在部署之前评估和解决其风险。典型的问题包括:
- 您的模型的用例是什么?
- 不同影响的风险是什么?
- 您如何评价公平性?
- 您如何使您的模型易于解释?
尽管设计初衷是好的,但问题是大多数人工智能模型所有者不了解如何评估其用例的风险。常见的说法可能是:“如果我的模型不收集个人身份信息 (PII),它怎么会不公平呢?”因此,表格的填写很少经过治理系统准确标记风险因素所需的深思熟虑。
因此,强调了解决方案的社会技术性质。模型所有者(个人)不能简单地获得一个复选框列表来评估其用例是否会造成伤害。相反,我们需要的是具有广泛不同生活经验的人们聚集在社区中,提供心理安全感,以便就不同的影响进行艰难的对话。
欢迎对值得信赖的人工智能有更广阔的视野
IBM® 相信采取“零客户”方法,通过咨询和产品主导的解决方案实施其为自己的客户提出的建议和系统。这种方法延伸到了道德实践,这就是 IBM 创建值得信赖的 AI 卓越中心 (COE) 的原因。
如上所述,经验和技能的多样性对于正确评估人工智能的影响至关重要。但对于一家充满人工智能创新者、专家和杰出工程师的公司来说,参与卓越中心的前景可能会令人生畏,因此需要培养一个心理安全社区。 IBM 明确表达了这一点:“对人工智能感兴趣?对人工智能伦理感兴趣?这张桌子上有你的座位。”
COE 为各个级别的从业者提供人工智能道德培训。提供同步学习(教师和学生在课堂环境中)和异步(自学)课程。
但这是COE的 应用的 培训为我们的从业者提供了最深刻的见解,让他们与全球、多元化、多学科团队在实际项目中合作,以更好地了解不同的影响。他们还利用 IBM 的设计思维框架 人工智能设计 小组在内部和与客户一起使用来评估人工智能模型的意外影响,将那些经常被边缘化的人放在首位。 (参见西尔维娅·达克沃斯的 权力与特权之轮 有关个人特征如何相互交叉从而使人们享有特权或边缘化的示例。)IBM 还向开源社区捐赠了许多框架 符合道德的设计.
以下是 IBM 公开发布的有关这些项目的一些报告:
需要自动化 AI 模型治理工具来收集有关 AI 模型执行情况的重要见解。但请注意,在模型开发并投入生产之前尽早捕获风险是最佳选择。通过创建由多元化、多学科从业者组成的社区,为人们提供一个安全的空间,就不同的影响进行艰难的对话,您就可以开始实施您的原则并负责任地开发人工智能的旅程。
实际上,当您招聘人工智能从业者时,请考虑创建模型的 70% 以上的工作都是在整理正确的数据。您希望雇用的人员知道如何收集具有代表性的数据,并且这些数据也是在征得同意的情况下收集的。您还希望了解的人与领域专家密切合作,以确保他们拥有正确的方法。确保这些从业者有情商,以谦逊和洞察力应对负责任地策划人工智能的挑战是关键。我们必须有意识地学习如何认识人工智能系统如何以及何时会加剧不平等,就像它们可以增强人类智力一样。
本文是否有帮助?
有没有
IBM 时事通讯
获取我们的时事通讯和主题更新,提供最新的思想领导力和对新兴趋势的见解。
现在订阅
更多新闻通讯
- :具有
- :是
- :不是
- :在哪里
- $UP
- 000
- 1
- 16
- 2022
- 2024
- 23
- 25
- 28
- 29
- 30
- 300
- 32
- 39
- 40
- 400
- 65
- 7
- 9
- a
- 对,能力--
- 关于
- 以上
- AC
- 加快
- 精准的
- 准确
- 横过
- 操作
- 适应
- 地址
- 承认
- 采用
- 广告
- 忠告
- 影响
- 中介代理
- AI
- AI模型
- 人工智能系统
- 瞄准
- AL
- 算法
- 算法
- 所有类型
- 还
- 时刻
- amp
- an
- 分析
- 和
- 任何
- 应用领域
- 应用领域
- 的途径
- 保健
- 地区
- 刊文
- 人造的
- 人工智能
- 人工智能(AI)
- AS
- 问
- 评估
- 评估
- 评定
- 助理
- 协助
- At
- 音频
- 增加
- 作者
- 可使用
- 避免
- 背部
- 平衡
- BE
- 很
- before
- 开始
- 作为
- 相信
- 好处
- 更好
- 超越
- 偏见
- 偏见
- 博客
- 博客
- 蓝色
- 波士顿
- 都
- 更广泛
- 建筑物
- 商业
- 业务功能
- 企业
- 但是
- 按键
- by
- CAN
- 捕获
- 捕获
- 碳
- 卡
- 牌
- 关心
- 案件
- 喵星人
- 产品类别
- 原因
- Center
- 卓越中心
- 中央
- 一定
- 挑战
- 特点
- 聊天机器人
- 查
- 孩子
- 儿童
- 界
- CIS
- 程
- 明确地
- 客户
- 密切
- 云端技术
- 颜色
- 组合
- 未来
- 相当常见
- 地区
- 社体的一部分
- 公司
- 公司
- 完成
- 概念
- 同意
- 所以
- 考虑
- 咨询
- 容器
- 继续
- 对话
- 核心
- 正确
- 相关
- 价格
- 可以
- 创建
- 创造
- 创作者
- 危急
- 人群
- 的CSS
- 策展
- 目前
- 习俗
- 顾客
- 客户体验
- 合作伙伴
- data
- 日期
- 决定
- 最深
- 默认
- 定义
- 交付
- 演示
- 部署
- 描述
- 设计
- 设计思想
- 设计
- 确定
- 开发
- 发达
- 不同
- 难
- 数字
- 数字化改造
- 不同
- 杰出的
- 不同
- 多元化
- do
- 域
- 捐赠
- 画
- 驾驶
- Ë&T
- 影响
- 努力
- 消除
- 嵌入
- 拥抱
- 新兴经济体的新市场。
- 员工
- enable
- 从事
- 发动机
- 工程师
- 英语
- 更多
- 保证
- 输入
- 错误
- 等
- 醚(ETH)
- 伦理
- 伦理
- 评估
- 评估
- 评估
- 甚至
- 所有的
- 到处
- 加剧
- 例子
- 例子
- 追求卓越
- Exit 退出
- 期望
- 体验
- 体验
- 技术专家
- 专门知识
- 专家
- 解释
- 裸露
- 扩展
- 非常
- Facebook的使者
- 促进
- 面对
- 因素
- 公平
- false
- 远
- 高效率
- 少数
- 找到最适合您的地方
- 专注焦点
- 遵循
- 以下
- 字体
- 针对
- 第一线
- 形式
- 基金会
- 框架
- 止
- 前
- 功能
- 收集
- 云集
- 搜集
- 生成的
- 生成式人工智能
- 发电机
- 得到
- 特定
- 给
- 全球
- 目标
- 理想中
- GOES
- 非常好
- 治理
- 语法
- 非常
- 格
- 团队
- 组的
- 事业发展
- 指南
- 伤害
- 有
- 标题
- 听
- 高度
- 帮助
- 有帮助
- 高
- 他
- 聘请
- 招聘
- 他的
- 持有
- 整体
- 主页
- 创新中心
- How To
- HTTPS
- 人
- 人类智慧
- 谦逊
- 杂交种
- 混合云
- i
- 生病
- IBM
- 首次代币发行
- ICON
- 理想
- 确定
- if
- 无知
- 图片
- 即时
- 影响力故事
- 影响
- 实施
- 实施
- 重要性
- 重要
- 改善
- 改善
- 提高
- in
- 包括
- 包含
- 包容
- 合并
- 日益
- 增量
- 指数
- 行业中的应用:
- 有影响
- 信息
- 創新
- 创新
- 输入
- 洞察
- 可行的洞见
- 即刻
- 代替
- 研究所
- 保险
- 保险公司
- 房源搜索
- 智能化
- 意图
- 故意
- 意图
- 有兴趣
- 利益
- 内部
- 相交
- 介入
- 吓人
- 固有
- ISN
- 问题
- 问题
- IT
- 它的
- 一月
- 加入
- 来参加我们的
- 旅程
- JPG
- 只是
- 保持
- 键
- 知道
- 已知
- 缺乏
- 语言
- 语言
- 大
- 大规模
- 最新
- 铅
- 领导者
- 领导团队
- 学习
- 让
- Level
- 杠杆作用
- 责任
- 谎言
- 喜欢
- 有限
- 清单
- 本地
- 当地
- LOOKS
- 使
- 制作
- 颠覆性技术
- 手册
- 许多
- 数学
- 数学的
- 问题
- 最大宽度
- 可能..
- me
- 意味着
- 满足
- 信使
- 可能
- 分钟
- 介意
- 最低限度
- 分钟
- 联络号码
- 模型
- 模型
- 现代化
- 更多
- 最先进的
- 移动
- 许多
- 多学科
- 必须
- my
- 自然
- 旅游导航
- 必要
- 需求
- 打印车票
- 需要
- 负
- 全新
- 新产品
- 新闻简报
- NLP
- 没有
- 注意
- 没什么
- 现在
- 众多
- of
- 折扣
- 提供
- 最多线路
- 优惠精选
- 经常
- on
- 一
- 开放源码
- 检讨
- 机会
- 最佳
- 优化
- or
- 组织
- 其他名称
- 我们的
- 性能优异
- 输出
- 超过
- 己
- 业主
- 页
- 参与
- 通过
- 员工
- 执行
- 人
- 个人
- 亲自
- 观点
- PHP
- ii
- 计划
- 柏拉图
- 柏拉图数据智能
- 柏拉图数据
- 插入
- 政策
- 位置
- 帖子
- 潜力
- 潜在客户
- 功率
- 强大
- 在练习上
- 做法
- 预测
- 预测
- 预测
- 小学
- 原则
- 优先
- 特权
- 市场问题
- 采购
- 产生
- 生产
- 生产率
- 核心产品
- 训练课程
- 项目
- 正确
- 前景
- 提供
- 优
- 代理
- 代理
- 心理
- 公然
- 出版
- 放
- 有疑问吗?
- 很快
- 报价
- 很少
- 准备就绪
- 阅读
- 真实
- 现实
- 承认
- 建议
- 减少
- 提炼
- 反映
- 反映
- 法规
- 业务报告
- 代表
- 代表
- 要求
- 要求
- 必须
- 研究
- 回应
- 提供品牌战略规划
- 负责任
- 响应
- 收入
- 收入增长
- 右
- 风险
- 风险因素
- 风险
- 路
- 机器人
- 安全
- 实现安全
- 说
- 同
- 说
- 鳞片
- 缩放
- 科学
- 屏风
- 脚本
- 搜索
- 搜索引擎
- 安全
- 看到
- 搜索引擎优化
- 服务
- 设置
- 应该
- 如图
- 只是
- 网站
- 松弛
- 小
- 智能
- 智能扬声器
- 短信
- So
- 方案,
- 解决方案
- 一些
- 来源
- 太空
- 音箱
- 赞助商
- 广场
- 利益相关者
- 标准
- 开始
- 国家的最先进的
- 统计
- 统计
- 学生
- 学习
- 主题
- 订阅
- 这样
- SUPPORT
- 支持
- SVG的
- 产品
- T
- 表
- 服用
- 目标
- 老师
- 队
- 文案
- 技术
- 第三
- 文本
- 比
- 谢谢
- 这
- 世界
- 其
- 他们
- 主题
- 他们自己
- 博曼
- 他们
- 认为
- 思维
- Free Introduction
- 那些
- 思想
- 精神领袖
- 三
- 通过
- 次
- 标题
- 至
- 一起
- 工具
- 最佳
- 主题
- 强硬
- 培训
- 产品培训
- 转型
- 趋势
- true
- 可靠
- 二
- 类型
- 普遍
- 理解
- 不公平
- 独特
- 解锁
- 最新动态
- 上
- 网址
- us
- 使用
- 用例
- 使用
- 利用
- 折扣值
- 价值观
- 各种
- 变化
- 非常
- 在线会议
- 体积
- W
- 想
- 是
- we
- 井
- 什么是
- 什么是
- ,尤其是
- 是否
- 这
- 而
- WHO
- 谁
- 为什么
- 广泛
- 更宽
- 将
- 智慧
- WISE
- Word
- WordPress
- 工作
- 合作
- 世界
- 将
- 书面
- 错误
- 但
- 您
- 您一站式解决方案
- 和风网