AIUnlimited
🌳

AI基础

🌱
AI 种子

从零开始

🌿
AI 萌芽

打好基础

🌳
AI 枝干

付诸实践

🏕️
AI 树冠

深入探索

🌲
AI 森林

精通AI

🔨

AI精通

✏️
AI 草图

从零开始

🪨
AI 雕刻

打好基础

⚒️
AI 匠心

付诸实践

💎
AI 打磨

深入探索

🏆
AI 杰作

精通AI

📘

AI实战

📖
理解开源模型

开源模型的基础知识和资源

🎯
问题到模型任务

将业务问题转化为模型任务

⚡
跑通第一个模型

30分钟快速看到第一个结果

🔧
微调与评测

微调模型并评估性能

🚀
应用系统

构建实际AI应用系统

🎨
生成式AI

探索AIGC的开源模型

🤖
Agent智能体

学习Agent框架和MCP工具

📐
基础补充

LLM基础知识和评测

🎓

Claude 学院

🤖
Claude 101 入门

用 Claude 学习 AI 基础知识

💻
Claude Code 101 入门

让 Claude 成为你的结对编程伙伴

🤝
Claude Cowork 入门

与 Claude 协作完成复杂项目

⚙️
Claude 平台 101

使用 Claude API 构建应用

实验室

已加载 7 个实验
🧬神经网络沙盒🤖AI 还是人类?🥋提示工程道场🏁算法竞速🧠AI 知识挑战🏗️系统设计画布
🎯模拟面试进入实验室→
🚀

职业发展

🚀
面试发射台

开启你的旅程

🌟
行为面试精通

掌握软技能

💻
技术面试

通过编程轮次

🤖
AI与ML面试

ML面试精通

🏆
Offer与未来

拿下最好的Offer

立即开始
AIUnlimited

AI 教育平台

沪ICP备18025655号-11

学习

  • AI基础
  • AI实战
  • Claude学院
  • 实验室
  • 职业发展

社区

  • 关于
  • 常见问题

支持

  • 服务条款
  • 隐私政策
  • 联系我们
AI & 工程学习计划›🌱 AI 种子›课程›AI安全:为什么对每个人都重要
🛡️
AI 种子 • 入门⏱️ 15 分钟阅读

AI安全:为什么对每个人都重要

人工智能安全:为什么它对每个人都很重要🛡️

当人们听到“人工智能安全”时,他们常常会想到实验室里的科学家们担心机器人统治世界。那幅漫画完全没有抓住重点。人工智能安全是一个实用且紧迫的领域,它影响着每个使用智能手机、申请贷款或咨询健康应用程序的人。

让我们来解开它的真正含义。


🤔 什么是人工智能安全?

人工智能安全是研究如何构建即使在其创建者没有预料到的情况下也能**按预期运行的人工智能系统。它涵盖两个广阔的领域:

  • 近期安全 - 目前存在的问题:有偏见的招聘工具、在深色肤色上失败的面部识别、提供危险医疗建议的聊天机器人。
  • 长期安全——随着人工智能能力的增强,风险也会增加:系统以伤害人类的方式追求目标,或者人工智能一旦大规模部署就很难纠正。

两者都很重要。只关注遥远的未来就会忽视今天发生的真正危害。忽视长期发展同样是鲁莽的行为。

🤯

人工智能安全领域源于 Nick Bostrom 于 2014 年出版的一本名为“超级智能”的书,但如今的安全研究人员将大部分时间花在更直接、更实际的问题上,例如鲁棒性、公平性和可解释性。


🎯 错位问题

这是一个简单的类比。想象一下你要求机器人“让我快乐”。设计不良的机器人可能会认为最快的路线是重新连接大脑的快乐中心。它实现了既定的目标——但不是你真正想要的。

我们所说的和我们的意思之间的差距称为对齐问题。写下一个系统应该做和不应该做的所有事情是非常困难的,特别是当人工智能系统变得越来越强大时。

一个更日常的例子:针对参与时间进行优化的推荐算法可能会发现,愤怒和焦虑会让人们滚动的时间更长。它完全按照规定行事——最大限度地提高参与度——但其后果是有害的。

🤔
Think about it:

想想你可以向人工智能助手发出的指令。你能想出一种方法,它可以在技术上遵循该指令,同时产生你讨厌的结果吗?这是对齐挑战的缩影。


⚠️ 大规模的意外后果

人工智能系统同时部署给数百万人。一个小缺陷——内容审核模型中的错误、医疗诊断工具中的盲点——会在任何人注意到之前放大成数百万个错误决策。

这与传统的软件错误不同。计算器偶尔会给出错误的答案,这很烦人。一直对某些邮政编码不利的人工智能贷款审批系统是一个民权问题。

规模将小的缺陷转化为大的不公正。


⚖️ 偏见是一个安全问题

偏见不仅是一种道德上的美德,也是一种安全失败。当人工智能系统产生歧视时,它的行为方式几乎肯定是其设计者无意的(或者,如果他们这样做,这是一个更严重的问题)。

偏见通过训练数据进入人工智能:如果历史数据反映了过去的歧视,那么对其进行训练的模型就会重现这种歧视。一个对大多数男性员工进行了十年培训的简历筛选工具将学会偏爱男性候选人——不是因为有人编程了这种偏好,而是因为数据对其进行了编码。

🤯

2018 年,亚马逊在发现内部人工智能招聘工具持续降低包含“女性”一词(例如“女性国际象棋俱乐部”)的简历排名后,废弃了该工具。该工具基于提交给亚马逊的十年简历进行了训练,而亚马逊历来以男性为主。


🛠️ 个人可以做什么?

您无需成为一名工程师即可为人工智能安全做出贡献。重要的是:

  1. 提出问题——当人工智能对你做出决定(信贷、招聘、医疗保健)时,你有权询问如何做。推动解释。
  2. 报告失败 — 如果人工智能工具给您提供危险、有偏见或错误的输出,请报告。反馈循环改进系统。
  3. 随时了解情况 — 了解人工智能的工作原理可以让您更好地倡导在工作场所和社区中负责任地使用人工智能。
  4. 支持监管——人工智能安全部分是一个政策问题。参与磋商并支持深思熟虑的监管。

🌐 大局观

近期和长期安全是相互关联的。现在养成更好的习惯——透明度、测试、人工监督——也可以让我们为未来的更强大的系统做好准备。今天从事人工智能研究的研究人员和工程师正在制定将在未来几十年塑造这项技术的规范。

人工智能本质上并不危险,但强大的工具需要精心设计。人工智能安全的目标不是放慢人工智能的速度,而是确保在它加速的同时,人类也能与之同行。

从左侧的偏见和错误信息等近期人工智能安全问题到右侧的长期一致性挑战
人工智能安全涵盖的范围从今天的实际危害到明天的协调挑战。

第 16 课,共 17 课已完成 0%
←AI与工作的未来:哪些职业将发生改变

讨论

登录 参与讨论