专知, 为人工智能从业者服务! - www.zhuanzhi.ai

专知,

0
百度权重
1
百度移动
0
3 6 0权重
0
搜狗权重
热度
16
出站链接
网站编号：672
最后点入：2024-12-29 03:20:13
加入时间：2024-12-29 03:20:11
网站备案: -
网站URL： http://www.zhuanzhi.ai
预估IP流量：186~283
IP地址：- 地址：-
备案方: -
关键词：(121个字符)
Artificial、 Intelligence、 (AI)、人工智能、知识服务、专业可信、知识链路、知识荟萃、主题定制、主题链路、搜索发现、机器学习、深度学习、自然语言处理、计算机视觉、编程、算法、代码、数据、课程、视频、论文、模型、教程、开源、
网站简介：(108个字符)
专知（www.zhuanzhi.ai），一个新的认知方式！专业可信的人工智能知识分发平台！我们致力于为AI从业者提供一个优质纯粹、专业可信的AI知识分发服务平台，与AI从业者一起学习、交流与成长！专业信用，创享美好！
网站截图/LOGO
在本站关于www.zhuanzhi.ai说明：
www.zhuanzhi.ai由网友主动性提交被前卫秒收录网整理收录的，前卫秒收录网仅提供www.zhuanzhi.ai的基础信息并免费向大众网友展示，www.zhuanzhi.ai的是IP地址：- 地址：-，www.zhuanzhi.ai的百度权重为0、百度手机权重为1、百度收录为898788条、360收录为31600条、搜狗收录为0条、谷歌收录为0条、百度来访流量大约在186~283之间、百度手机端来访流量大约在170~260之间、www.zhuanzhi.ai的备案号是-、备案人叫-、被百度收录的关键词有39个、手机端关键词有189个、迄今为止已经创建未知。
下载地址: txt下载、docx下载、pdf下载、rar下载、zip下载
本页地址: https://www.qianwe.net/links/42d3350604c526747d52.html
温馨提示
做上本站友情链接,在您站上点击一次,即可自动秒收录并自动排在本站第一位！
<a href="https://www.qianwe.net/" target="_blank">前卫秒收录网</a>
SEO综合信息
SEO信息	百度来访IP：186~283 \| 移动端来访IP：170~260 \| 出站链接： \| 站内链接：21
IP网速：	IP地址：- 地址：- \| 网速：132毫秒
ALEXA排名	世界排名：- \| 预估IP：- \| 预估PV：-
备案信息	- \| 名称：- \| 已创建：未知
收录	百度	360	搜狗	谷歌
查询	898788	31600	0	0
电脑关键词	手机关键词	页面友好	首页位置	索引	近期收录
39	189	电脑端优秀	-	0	0
服务器信息协议类型 HTTP/1.1 200 OK 页面类型 text/html; charset=utf-8 服务器类型 nginx/1.14.0 (Ubuntu) 程序支持 Express 连接标识 "d5d8d-KyED2mgOQH7a3PeieDsx0BOooAo" 消息发送 2024年1月10日 14时16分54秒 GZIP检测已启用GZIP压缩源文件大小 836.45KB 压缩后大小 222.89KB 压缩率 73.35%
网页快照
              专 知 , 为 人 工 智 能 从 业 者 服 务 ! 成 为 V I P 会 员 查 看 完 整 内 容 V I P 会 员 码 认 证 首 页 主 题 发 现 会 员 服 务 注 册 · 登 录 专 业 可 信 的 知 识 分 发 专 知 一 下 高 级 搜 索 推 荐 最 新 最 热 论 文 资 讯 基 金 人 工 智 能 深 度 学 习 大 型 语 言 模 型 国 产 大 模 型 D e e p S e e k V 3 一 夜 火 爆 全 球 ， 《 D e e p S e e k V 3 技 术 报 告 》 ， 5 3 页 p d f 专 知 会 员 服 务 1 9 + 阅 读 · 1 2 月 2 7 日 国 产 大 模 型 D e e p S e e k V 3 一 夜 火 爆 全 球 ， 《 D e e p S e e k V 3 技 术 报 告 》 ， 5 3 页 p d f 专 知 会 员 服 务 3 + 阅 读 · 1 2 月 2 7 日 【 A A A I 2 0 2 5 】 通 过 自 适 应 多 方 面 检 索 增 强 ， 利 用 大 型 语 言 模 型 进 行 知 识 图 谱 问 答 专 知 会 员 服 务 1 4 + 阅 读 · 1 2 月 2 6 日 大 语 言 模 型 【 伯 克 利 博 士 论 文 】 在 大 规 模 语 言 模 型 时 代 构 建 自 主 系 统 专 知 会 员 服 务 1 + 阅 读 · 今 天 1 3 : 5 5 可 解 释 人 工 智 能 综 合 指 南 ： 从 经 典 模 型 到 大 规 模 语 言 模 型 专 知 会 员 服 务 1 + 阅 读 · 今 天 1 3 : 5 1 大 语 言 模 型 的 幻 觉 问 题 研 究 综 述 专 知 会 员 服 务 3 1 + 阅 读 · 1 2 月 2 5 日 A I 与 军 事 关 注 1 1 5 0 人 工 智 能 在 军 事 中 可 用 于 多 项 任 务 ， 例 如 目 标 识 别 、 大 数 据 处 理 、 作 战 系 统 、 网 络 安 全 、 后 勤 运 输 、 战 争 医 疗 、 威 胁 和 安 全 监 测 以 及 战 斗 模 拟 和 训 练 。 
 战 场 教 训 ： 乌 克 兰 如 何 重 新 定 义 对 抗 性 环 境 下 的 现 代 战 争 《 时 间 序 列 预 测 方 法 综 述 》 美 陆 军 智 能 战 场 环 境 感 知 2 0 2 4 最 新 7 4 页 报 告 《 美 国 陆 军 工 程 兵 团 ： 时 间 序 列 工 具 箱 用 户 指 南 》 2 0 2 4 最 新 6 9 页 报 告 《 2 1 世 纪 的 信 息 战 ： 在 现 代 海 战 中 实 现 可 靠 指 挥 与 控 制 》 2 0 2 4 最 新 报 告 《 水 下 通 信 与 集 成 能 力 及 差 距 》 最 新 2 0 页 s l i d e s T r a n s f o r m e r s · 扩 散 模 型 · 生 成 式 人 工 智 能 · 书 籍 · 1 2 月 1 6 日 【 新 书 】 《 基 于 T r a n s f o r m e r s 和 扩 散 模 型 的 生 成 式 人 工 智 能 实 战 》 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 书 籍 简 介 通 过 这 本 实 用 的 操 作 手 册 ， 学 习 使 用 生 成 式 人 工 智 能 技 术 创 建 新 颖 的 文 本 、 图 像 、 音 频 甚 至 音 乐 。 
 读 者 将 理 解 最 先 进 的 生 成 模 型 是 如 何 工 作 的 ， 如 何 对 其 进 行 微 调 和 适 应 以 满 足 个 人 需 求 ， 以 及 如 何 结 合 现 有 的 构 建 块 创 造 新 的 模 型 和 跨 领 域 的 创 意 应 用 。 
 本 书 从 理 论 概 念 介 绍 开 始 ， 紧 接 着 是 指 导 性 的 实 践 应 用 ， 包 含 丰 富 的 代 码 示 例 和 易 于 理 解 的 插 图 。 
 你 将 学 习 如 何 使 用 开 源 库 来 利 用 变 换 器 和 扩 散 模 型 ， 进 行 代 码 探 索 ， 并 研 究 若 干 现 有 项 目 ， 以 帮 助 指 导 你 的 工 作 。 
 * 构 建 和 定 制 能 够 生 成 文 本 和 图 像 的 模 型 * 探 索 使 用 预 训 练 模 型 与 微 调 自 定 义 模 型 之 间 的 权 衡 * 创 建 和 使 用 能 够 生 成 、 编 辑 和 修 改 任 意 风 格 图 像 的 模 型 * 为 多 种 创 意 用 途 定 制 变 换 器 和 扩 散 模 型 * 训 练 能 够 体 现 你 个 人 风 格 的 模 型 作 者 介 绍 O m a r S a n s e v i e r o 是 H u g g i n g F a c e 的 首 席 L l a m a 官 员 及 平 台 与 社 区 负 责 人 ， 领 导 开 发 者 倡 导 工 程 、 设 备 端 和 月 球 项 目 团 队 。 
 O m a r 拥 有 丰 富 的 工 程 经 验 ， 曾 在 G o o g l e 的 G o o g l e A s s i s t a n t 和 T e n s o r F l o w G r a p h i c s 团 队 工 作 。 
 O m a r 在 H u g g i n g F a c e 的 工 作 处 于 开 源 、 产 品 、 研 究 和 技 术 社 区 的 交 汇 点 。 
 P e d r o C u e n c a 是 H u g g i n g F a c e 的 机 器 学 习 工 程 师 ， 负 责 扩 散 软 件 、 模 型 和 应 用 程 序 。 
 他 在 互 联 网 应 用 领 域 有 超 过 2 0 年 的 开 发 经 验 （ 在 西 班 牙 ， 他 参 与 创 建 了 第 一 个 互 动 教 育 门 户 、 第 一 家 网 上 书 店 和 第 一 家 免 费 互 联 网 服 务 提 供 商 ） 。 
 近 年 来 ， 他 专 注 于 i O S 开 发 。 
 作 为 L a t e N i t e S o f t 的 联 合 创 始 人 兼 首 席 技 术 官 ， 他 开 发 了 成 功 的 i P h o n e 摄 影 应 用 C a m e r a + ， 并 为 诸 如 摄 影 增 强 和 超 分 辨 率 等 任 务 创 建 了 深 度 学 习 模 型 。 
 他 还 参 与 了 d a l l e m i n i 背 后 的 开 发 和 运 营 工 作 。 
 他 带 来 了 将 人 工 智 能 研 究 融 入 现 实 世 界 服 务 中 的 实 际 愿 景 ， 以 及 其 中 的 挑 战 与 优 化 。 
 A p o l i n á r i o P a s s o s 是 H u g g i n g F a c e 的 机 器 学 习 艺 术 工 程 师 ， 跨 不 同 团 队 工 作 ， 涉 及 多 个 机 器 学 习 在 艺 术 与 创 意 领 域 的 应 用 场 景 。 
 A p o l i n á r i o 拥 有 超 过 1 0 年 的 专 业 与 艺 术 经 验 ， 曾 在 举 办 艺 术 展 览 、 编 程 和 产 品 管 理 之 间 交 替 工 作 ， 曾 担 任 W o r l d D a t a L a b 的 产 品 负 责 人 。 
 A p o l i n á r i o 旨 在 确 保 机 器 学 习 生 态 系 统 能 支 持 并 使 艺 术 应 用 场 景 变 得 有 意 义 。 
 J o n a t h a n W h i t a k e r 是 一 名 数 据 科 学 家 和 深 度 学 习 研 究 员 ， 专 注 于 生 成 建 模 。 
 此 前 ， 他 曾 参 与 与 本 书 所 涵 盖 主 题 相 关 的 多 个 课 程 ， 包 括 H u g g i n g F a c e 的 扩 散 模 型 课 程 ， 以 及 他 与 J e r e m y H o w a r d 在 2 0 2 2 年 共 同 创 建 的 F a s t . A I 课 程 《 从 深 度 学 习 基 础 到 稳 定 扩 散 》 。 
 他 还 曾 在 行 业 中 应 用 这 些 技 术 ， 担 任 顾 问 工 作 ， 目 前 全 职 从 事 A n s w e r . A I 的 人 工 智 能 研 究 与 开 发 。 
 成 为 V I P 会 员 查 看 完 整 内 容 H a n d s O n G e n e r a t i v e A I w i t h T r a n s f o r m e r s a n d D i f f u s i o n M o d e l s 点 赞 并 收 藏 4 4 暂 时 没 有 读 者 6 8 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 多 智 能 体 强 化 学 习 · 书 籍 · 1 2 月 2 1 日 正 式 出 版 ! 新 书 《 多 智 能 体 强 化 学 习 ： 基 础 与 现 代 方 法 》 完 整 版 ， 爱 丁 堡 S t e f a n o 博 士 编 著 ， 3 9 5 页 p d f ， 附 S l i d e s 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 《 多 智 能 体 强 化 学 习 ( M A R L ) 的 全 面 介 绍 》 《 多 智 能 体 强 化 学 习 ( M A R L ) 》 是 机 器 学 习 领 域 中 的 一 个 重 要 分 支 ， 涉 及 一 群 智 能 体 在 共 享 环 境 中 学 习 如 何 进 行 最 优 互 动 。 
 它 在 现 代 生 活 中 应 用 广 泛 ， 从 自 动 驾 驶 、 多 人 机 器 人 工 厂 到 自 动 化 交 易 和 能 源 网 络 管 理 等 。 
 本 书 提 供 了 一 个 清 晰 且 严 谨 的 多 智 能 体 强 化 学 习 （ M A R L ） 介 绍 ， 涵 盖 了 M A R L 的 模 型 、 解 决 方 案 概 念 、 算 法 思 想 、 技 术 挑 战 以 及 现 代 方 法 。 
 本 书 首 先 介 绍 了 该 领 域 的 基 础 ， 包 括 强 化 学 习 理 论 和 算 法 的 基 础 、 交 互 式 游 戏 模 型 、 各 种 游 戏 的 解 决 方 案 概 念 以 及 支 撑 M A R L 研 究 的 算 法 思 想 。 
 接 着 详 细 讲 解 了 利 用 深 度 学 习 技 术 的 现 代 M A R L 算 法 ， 涵 盖 了 集 中 训 练 与 分 散 执 行 、 价 值 分 解 、 参 数 共 享 、 自 对 弈 等 重 要 思 想 。 
 本 书 附 带 了 一 个 用 P y t h o n 编 写 的 M A R L 代 码 库 ， 包 含 了 自 包 含 且 易 于 阅 读 的 M A R L 算 法 实 现 。 
 技 术 内 容 采 用 通 俗 易 懂 的 语 言 解 释 ， 并 通 过 大 量 示 例 进 行 说 明 ， 使 新 手 能 够 理 解 M A R L ， 同 时 也 为 更 高 级 的 读 者 提 供 了 高 水 平 的 洞 察 。 
 首 本 介 绍 M A R L 基 础 和 应 用 的 教 材 ， 由 该 领 域 的 专 家 编 写 综 合 强 化 学 习 、 深 度 学 习 和 博 弈 论 实 践 为 主 ， 关 注 实 验 运 行 的 相 关 考 虑 ， 并 描 述 用 于 测 试 M A R L 算 法 的 环 境 以 清 晰 简 明 的 语 言 解 释 复 杂 概 念 课 堂 验 证 ， 适 用 于 计 算 机 科 学 、 人 工 智 能 和 机 器 人 学 领 域 的 研 究 生 及 专 业 人 士 资 源 包 括 代 码 和 幻 灯 片 h t t p s : / / m a r l b o o k . c o m / 想 象 一 个 场 景 ， 在 这 个 场 景 中 ， 一 个 由 自 主 智 能 体 组 成 的 集 体 ， 每 个 智 能 体 都 有 能 力 做 出 自 己 的 决 定 ， 他 们 必 须 在 一 个 共 享 环 境 中 互 动 ， 以 达 成 某 些 目 标 。 
 这 些 智 能 体 可 能 有 一 个 共 享 的 目 标 ， 比 如 一 个 移 动 机 器 人 的 车 队 ， 其 任 务 是 在 一 个 大 型 仓 库 内 收 集 和 运 送 货 物 ， 或 者 一 个 负 责 监 控 海 上 石 油 钻 井 平 台 的 无 人 机 队 伍 。 
 智 能 体 也 可 能 有 冲 突 的 目 标 ， 比 如 在 一 个 虚 拟 市 场 上 交 易 商 品 的 智 能 体 ， 每 个 智 能 体 都 试 图 最 大 化 自 己 的 收 益 。 
 由 于 我 们 可 能 不 知 道 这 些 智 能 体 应 该 如 何 互 动 以 达 成 他 们 的 目 标 ， 所 以 我 们 让 他 们 自 己 去 解 决 。 
 因 此 ， 这 些 智 能 体 开 始 在 他 们 的 环 境 中 尝 试 行 动 ， 并 收 集 关 于 环 境 如 何 随 着 他 们 的 行 动 而 变 化 ， 以 及 其 他 智 能 体 如 何 行 为 的 经 验 。 
 随 着 时 间 的 推 移 ， 这 些 智 能 体 开 始 学 习 各 种 概 念 ， 如 解 决 任 务 所 需 的 技 能 ， 以 及 重 要 的 ， 如 何 与 其 他 智 能 体 协 调 他 们 的 行 动 。 
 他 们 甚 至 可 能 学 会 发 展 一 种 共 享 的 语 言 ， 以 便 智 能 体 之 间 的 通 信 。 
 最 后 ， 这 些 智 能 体 达 到 了 一 定 的 熟 练 程 度 ， 成 为 了 互 动 优 化 以 达 成 他 们 目 标 的 专 家 。 
 这 个 令 人 兴 奋 的 愿 景 ， 简 而 言 之 ， 就 是 多 智 能 体 强 化 学 习 （ M A R L ） 希 望 达 成 的 目 标 。 
 M A R L 基 于 强 化 学 习 （ R L ） ， 在 这 种 学 习 中 ， 智 能 体 通 过 尝 试 行 动 和 接 收 奖 励 来 学 习 最 优 决 策 策 略 ， 目 标 是 选 择 能 在 时 间 内 最 大 化 累 积 奖 励 的 行 动 。 
 而 在 单 一 智 能 体 的 R L 中 ， 重 点 是 为 单 一 智 能 体 学 习 最 优 策 略 ， 在 M A R L 中 ， 重 点 是 为 多 个 智 能 体 学 习 最 优 策 略 以 及 在 这 个 学 习 过 程 中 出 现 的 独 特 挑 战 。 
 在 这 第 一 章 中 ， 我 们 将 开 始 概 述 M A R L 中 的 一 些 基 础 概 念 和 挑 战 。 
 我 们 首 先 介 绍 多 智 能 体 系 统 的 概 念 ， 这 是 由 环 境 、 环 境 中 的 智 能 体 及 其 目 标 定 义 的 。 
 然 后 我 们 讨 论 了 M A R L 如 何 在 这 样 的 系 统 中 运 作 以 学 习 智 能 体 的 最 优 策 略 ， 并 通 过 一 些 潜 在 应 用 的 例 子 来 说 明 。 
 接 下 来 我 们 讨 论 了 M A R L 中 的 一 些 关 键 挑 战 ， 如 非 稳 定 性 和 均 衡 选 择 问 题 ， 以 及 几 种 描 述 M A R L 可 以 如 何 使 用 的 不 同 “ 议 程 ” 。 
 在 本 章 的 结 尾 ， 我 们 对 这 本 书 的 两 部 分 中 涵 盖 的 主 题 进 行 了 概 述 。 
 多 智 能 体 强 化 学 习 （ M A R L ） 算 法 为 多 智 能 体 系 统 中 的 一 组 智 能 体 学 习 最 优 策 略 。 
 与 单 一 智 能 体 的 情 况 一 样 ， 这 些 策 略 是 通 过 试 错 过 程 来 学 习 的 ， 目 标 是 最 大 化 智 能 体 的 累 积 奖 励 ， 或 者 说 回 报 。 
 图 1 . 3 显 示 了 M A R L 训 练 循 环 的 基 本 示 意 图 。 
 一 组 n 个 智 能 体 选 择 个 体 行 动 ， 这 些 行 动 一 起 被 称 为 联 合 行 动 。 
 联 合 行 动 按 照 环 境 动 态 改 变 了 环 境 的 状 态 ， 并 且 智 能 体 由 于 这 种 变 化 收 到 个 体 奖 励 ， 同 时 也 对 新 环 境 状 态 有 个 体 观 察 。 
 这 个 循 环 持 续 进 行 ， 直 到 满 足 终 止 条 件 （ 比 如 一 位 智 能 体 赢 得 了 一 场 象 棋 比 赛 ） 或 无 限 期 地 进 行 。 
 这 个 循 环 从 初 始 状 态 到 终 止 状 态 的 完 整 运 行 被 称 为 一 个 情 节 。 
 通 过 多 个 独 立 情 节 产 生 的 数 据 ， 即 每 个 情 节 中 经 历 的 观 察 、 行 动 和 奖 励 ， 被 用 来 持 续 改 进 智 能 体 的 策 略 。 
 这 本 书 为 大 学 生 、 研 究 者 和 从 业 者 提 供 了 关 于 多 智 能 体 强 化 学 习 理 论 和 实 践 的 介 绍 。 
 在 这 个 引 言 章 节 之 后 ， 本 书 的 剩 余 部 分 分 为 两 部 分 。 
 本 书 的 第 一 部 分 提 供 了 关 于 M A R L 中 使 用 的 基 本 模 型 和 概 念 的 基 础 知 识 。 
 具 体 来 说 ， 第 二 章 对 单 一 智 能 体 R L 的 理 论 和 表 格 算 法 进 行 了 介 绍 。 
 第 三 章 介 绍 了 基 本 的 游 戏 模 型 ， 以 定 义 多 智 能 体 环 境 中 的 状 态 、 行 动 、 观 察 和 奖 励 等 概 念 。 
 然 后 ， 第 四 章 介 绍 了 一 系 列 解 决 概 念 ， 这 些 概 念 定 义 了 解 决 这 些 游 戏 模 型 意 味 着 什 么 ； 也 就 是 说 ， 智 能 体 如 何 最 优 地 行 动 意 味 着 什 么 。 
 最 后 ， 第 五 章 介 绍 了 在 游 戏 中 应 用 M A R L 来 计 算 解 决 方 案 时 的 一 些 基 础 算 法 思 想 和 挑 战 。 
 本 书 的 第 二 部 分 侧 重 于 当 代 利 用 深 度 学 习 技 术 创 建 新 的 强 大 M A R L 算 法 的 M A R L 研 究 。 
 我 们 首 先 在 第 六 章 和 第 七 章 分 别 对 深 度 学 习 和 深 度 强 化 学 习 进 行 了 介 绍 。 
 基 于 前 两 章 ， 第 八 章 介 绍 了 近 年 来 开 发 的 一 些 最 重 要 的 M A R L 算 法 ， 包 括 集 中 化 训 练 与 分 散 化 执 行 、 价 值 分 解 和 参 数 共 享 等 思 想 。 
 第 九 章 在 实 施 和 使 用 M A R L 算 法 以 及 如 何 评 估 学 习 到 的 策 略 时 提 供 了 实 用 指 导 。 
 最 后 ， 第 十 章 描 述 了 在 M A R L 研 究 中 开 发 的 一 些 多 智 能 体 环 境 的 例 子 。 
 这 本 书 的 一 个 目 标 是 为 想 在 实 践 中 使 用 本 书 中 讨 论 的 M A R L 算 法 ， 以 及 开 发 他 们 自 己 的 算 法 的 读 者 提 供 一 个 起 点 。 
 因 此 ， 这 本 书 配 有 自 己 的 M A R L 代 码 库 （ 可 从 书 籍 网 站 下 载 ） ， 该 代 码 库 使 用 P y t h o n 编 程 语 言 开 发 ， 提 供 了 许 多 现 有 的 M A R L 算 法 的 实 现 ， 这 些 实 现 是 自 包 含 的 ， 易 于 阅 读 。 
 第 九 章 使 用 代 码 库 中 的 代 码 片 段 来 解 释 早 些 章 节 中 提 出 的 算 法 背 后 的 重 要 概 念 的 实 现 细 节 。 
 我 们 希 望 所 提 供 的 代 码 能 够 帮 助 读 者 理 解 M A R L 算 法 ， 并 开 始 在 实 践 中 使 用 它 们 。 
 成 为 V I P 会 员 查 看 完 整 内 容 h t t p s : / / m a r l b o o k . c o m / M u l t i A g e n t R e i n f o r c e m e n t L e a r n i n g : F o u n d a t i o n s a n d M o d e r n A p p r o a c h e s 【 C o d e s 】 h t t p s : / / g i t h u b . c o m / m a r l b o o k / s l i d e s h t t p s : / / g i t h u b . c o m / m a r l b o o k / c o d e b a s e 点 赞 并 收 藏 3 1 暂 时 没 有 读 者 5 8 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 强 化 学 习 · 书 籍 · 1 2 月 1 0 日 【 新 书 】 《 强 化 学 习 概 述 》 手 册 ， 1 4 4 页 p d f 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 本 手 稿 提 供 了 一 个 全 面 、 最 新 的 强 化 学 习 （ 深 度 强 化 学 习 ） 与 序 列 决 策 制 定 领 域 的 概 述 ， 涵 盖 了 基 于 值 的 方 法 、 策 略 梯 度 方 法 、 基 于 模 型 的 方 法 以 及 其 他 多 个 主 题 （ 包 括 对 强 化 学 习 与 大 语 言 模 型 （ R L + L L M s ） 的 简 要 讨 论 ） 。 
 强 化 学 习 概 述 * * 序 言 文 章 旨 在 提 供 一 个 强 化 学 习 领 域 的 全 面 概 览 ， 包 含 了 来 自 M u r p h y 先 前 教 科 书 章 节 的 内 容 ， 并 添 加 了 大 量 新 资 料 。 
 * * 1 . 引 言 1 . 1 顺 序 决 策 制 定 ： 定 义 了 问 题 ， 介 绍 了 通 用 模 型 ， 区 分 了 情 节 任 务 与 连 续 任 务 ， 并 讨 论 了 遗 憾 的 概 念 。 
 * 1 . 2 典 型 示 例 ： 包 括 部 分 观 测 M D P s 、 上 下 文 M D P s 、 上 下 文 B a n d i t s 、 信 念 状 态 M D P s 和 优 化 问 题 等 实 例 。 
 * 1 . 3 强 化 学 习 ： 分 为 基 于 价 值 的 R L （ 近 似 动 态 规 划 ） 、 基 于 策 略 的 R L 、 基 于 模 型 的 R L ， 并 探 讨 了 如 何 处 理 部 分 可 观 察 性 的 问 题 。 
 * * 内 容 框 架 文 章 涵 盖 了 强 化 学 习 的 基 础 概 念 、 经 典 示 例 以 及 不 同 的 学 习 方 法 ， 如 ： * 基 于 价 值 的 方 法 （ V a l u e b a s e d R L ） * 基 于 策 略 的 方 法 （ P o l i c y b a s e d R L ） * 基 于 模 型 的 方 法 （ M o d e l b a s e d R L ） 此 外 ， 还 深 入 讨 论 了 各 种 应 用 领 域 和 技 术 进 步 ， 例 如 深 度 强 化 学 习 中 的 树 结 构 模 型 （ T r e e Q N ） 、 用 于 离 线 强 化 学 习 的 极 简 方 法 、 信 任 区 域 策 略 优 化 （ T R P O ） 、 优 先 经 验 回 放 （ P r i o r i t i z e d E x p e r i e n c e R e p l a y ） 、 通 用 优 势 估 计 （ G e n e r a l i z e d A d v a n t a g e E s t i m a t i o n ） 、 近 端 策 略 优 化 算 法 （ P P O ） ， 以 及 其 他 最 新 的 研 究 成 果 和 技 术 进 展 。 
 强 化 学 习 的 应 用 和 技 术 文 中 引 用 了 许 多 研 究 工 作 来 展 示 强 化 学 习 在 不 同 场 景 下 的 应 用 ， 比 如 使 用 深 度 神 经 网 络 进 行 连 续 控 制 、 通 过 内 在 动 机 加 速 学 习 过 程 、 结 合 语 言 模 型 实 现 世 界 建 模 等 。 
 同 时 ， 也 提 到 了 一 些 重 要 的 技 术 发 展 ， 如 D Q N 、 D D P G 、 T D 3 、 S A C 等 算 法 的 发 展 及 其 对 解 决 复 杂 环 境 问 题 的 影 响 。 
 总 之 ， 这 篇 文 章 为 读 者 提 供 了 一 个 理 解 强 化 学 习 基 本 原 理 及 其 最 新 发 展 的 全 面 视 角 ， 适 合 希 望 深 入 了 解 这 一 领 域 的 研 究 人 员 和 从 业 者 阅 读 。 
 成 为 V I P 会 员 查 看 完 整 内 容 R e i n f o r c e m e n t L e a r n i n g : A n O v e r v i e w 点 赞 并 收 藏 3 2 暂 时 没 有 读 者 5 3 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 书 籍 · 机 器 学 习 · 集 成 学 习 · 稀 疏 方 法 · 1 2 月 2 4 日 重 磅 ！ F r a n c i s B a c h 新 书 《 ( 机 器 ) 学 习 理 论 : 第 一 性 原 理 》 ， 4 8 8 页 p d f 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 这 本 书 由 M I T P r e s s 出 版 ， 属 于 我 所 编 辑 的 系 列 （ 正 如 预 期 ， 他 们 在 整 个 过 程 中 给 予 了 我 极 大 的 支 持 ） 。 
 它 可 以 从 我 的 个 人 网 页 上 免 费 在 线 阅 读 ， 但 当 然 ， 您 也 可 以 从 您 喜 欢 的 在 线 商 店 购 买 纸 质 版 （ 请 查 看 这 里 的 链 接 ） ， 这 样 您 就 可 以 为 我 下 一 辆 公 路 自 行 车 的 购 买 做 出 贡 献 （ 对 于 法 国 的 读 者 ， a m a z o n . f r 和 f n a c . c o m 也 有 售 ， 许 多 国 家 的 主 要 在 线 商 店 也 应 该 有 销 售 ） 。 
 除 了 P D F 和 纸 质 版 外 ， 所 有 图 形 都 可 以 通 过 P y t h o n 和 M a t l a b 代 码 进 行 复 现 ， 相 关 代 码 可 以 在 这 里 找 到 （ 我 计 划 未 来 加 入 J u l i a 版 本 ） 。 
 我 已 经 开 始 收 集 涵 盖 所 有 章 节 的 练 习 题 解 答 （ 在 这 里 可 以 找 到 ， 注 意 ： 工 作 进 行 中 ） 。 
 如 果 您 想 贡 献 解 答 、 指 出 错 别 字 或 提 出 改 进 建 议 ， 我 将 不 胜 感 激 （ 请 给 我 发 电 子 邮 件 ） 。 
 未 来 ， 我 可 能 会 加 入 一 些 历 史 部 分 ， 这 些 内 容 我 决 定 暂 时 放 弃 ， 因 为 这 会 花 费 我 更 多 的 时 间 （ 如 果 您 有 相 关 的 指 引 或 建 议 ， 欢 迎 告 知 我 ） 。 
 为 什 么 要 再 写 一 本 关 于 学 习 理 论 的 书 ？ 市 面 上 已 经 有 很 多 优 秀 的 学 习 理 论 书 籍 了 。 
 为 什 么 我 还 要 写 一 本 新 书 呢 ？ 请 阅 读 书 的 前 言 （ 在 文 章 的 末 尾 会 展 示 ） ， 那 里 列 出 了 几 个 原 因 ， 但 主 要 的 原 因 是 ， 我 觉 得 当 前 机 器 学 习 数 学 分 析 的 趋 势 导 致 了 一 些 过 于 复 杂 的 论 证 和 结 果 ， 这 些 内 容 往 往 对 实 践 者 并 不 直 接 相 关 。 
 因 此 ， 我 的 目 标 是 提 出 从 基 本 原 理 出 发 ， 能 够 推 导 出 来 的 最 简 单 的 表 述 ， 尽 量 保 持 严 谨 ， 但 又 不 让 读 者 感 到 被 更 多 的 高 深 结 果 淹 没 ， 这 些 结 果 需 要 过 多 的 数 学 复 杂 性 。 
 我 已 经 尽 力 而 为 ， 但 我 相 信 总 有 一 些 地 方 可 以 提 出 更 简 洁 的 论 证 ； 如 果 您 发 现 了 ， 欢 迎 告 知 我 。 
 此 外 ， 我 还 尝 试 通 过 一 系 列 简 单 的 实 验 ， 将 理 论 结 果 与 实 际 性 能 结 合 起 来 。 
 这 本 书 的 一 个 重 要 特 色 是 它 专 注 于 实 值 预 测 函 数 ： 即 使 在 预 测 离 散 值 输 出 时 ， 实 值 预 测 函 数 已 经 成 为 现 代 机 器 学 习 技 术 的 事 实 标 准 。 
 因 此 ， 尽 管 V a p n i k C h e r v o n e n k i s 维 度 在 历 史 上 有 着 举 足 轻 重 的 地 位 ， 我 决 定 不 在 书 中 呈 现 它 ， 而 是 直 接 基 于 R a d e m a c h e r 复 杂 度 推 导 我 的 通 用 界 限 。 
 专 注 于 实 值 预 测 函 数 使 得 最 小 二 乘 回 归 成 为 理 论 的 核 心 部 分 ， 这 对 于 学 生 来 说 非 常 重 要 ， 因 为 许 多 机 器 学 习 中 的 重 要 概 念 （ 如 正 则 化 、 随 机 算 法 ） 已 经 在 简 化 的 形 式 中 得 到 了 体 现 。 
 在 我 所 涉 及 的 众 多 主 题 中 ， 一 些 采 用 了 标 准 的 处 理 方 式 ， 但 有 些 可 能 值 得 引 起 有 经 验 的 读 者 的 注 意 （ 我 可 能 会 在 未 来 写 一 些 博 客 文 章 来 进 一 步 探 讨 这 些 内 容 ） 。 
 下 面 是 我 对 每 一 章 的 几 点 印 象 ： 第 一 章 （ 数 学 预 备 知 识 ） ： 这 一 章 没 有 什 么 特 别 复 杂 的 内 容 ， 主 要 介 绍 了 一 些 有 用 的 计 算 技 巧 和 主 要 的 浓 度 不 等 式 。 
 一 些 内 容 已 经 在 博 客 中 讨 论 过 ， 例 如 J e n s e n 不 等 式 、 矩 阵 的 浓 度 不 等 式 ， 或 者 将 在 未 来 发 布 （ 如 矩 阵 逆 定 理 ） 。 
 第 二 章 （ 监 督 学 习 简 介 ） ： 本 章 集 中 讨 论 了 监 督 学 习 的 传 统 决 策 理 论 表 述 ， 包 括 损 失 、 风 险 等 内 容 。 
 我 加 入 了 L u c D e v r o y e （ 1 9 8 2 ） 提 出 的 “ 无 免 费 午 餐 定 理 ” ， 因 为 我 认 为 它 很 好 地 展 示 了 没 有 假 设 的 情 况 下 ， 学 习 是 无 法 实 现 的 。 
 第 三 章 （ 线 性 最 小 二 乘 回 归 ） ： 无 论 这 个 古 老 的 方 法 起 源 于 L e g e n d r e 还 是 G a u s s ， 这 并 不 重 要 。 
 我 认 为 它 仍 然 非 常 重 要 ， 因 为 它 已 经 囊 括 了 许 多 经 典 的 机 器 学 习 概 念 ， 尤 其 是 正 则 化 的 需 求 ， 以 避 免 在 d / n d / n d / n （ 其 中 n 是 观 测 数 ， d 是 参 数 数 目 ） 中 出 现 收 敛 率 。 
 因 此 ， 这 已 经 能 传 达 一 个 信 息 ： 参 数 的 数 量 通 常 不 是 衡 量 学 习 方 法 泛 化 能 力 的 最 佳 方 式 。 
 第 四 章 （ 经 验 风 险 最 小 化 ） ： 本 章 首 先 广 泛 （ 但 传 统 地 ） 讨 论 了 用 于 二 分 类 问 题 的 凸 代 理 函 数 （ 这 将 在 第 十 三 章 中 扩 展 为 结 构 化 预 测 ） 。 
 对 于 凸 损 失 函 数 ， 首 先 采 用 约 束 优 化 方 法 进 行 正 则 化 估 计 （ 因 为 这 较 为 简 单 ） ， 但 为 了 避 免 理 论 与 实 践 之 间 的 显 著 差 异 ， 我 专 门 添 加 了 一 节 关 于 惩 罚 估 计 的 方 法 ， 其 中 包 含 了 一 些 简 单 的 （ 其 中 一 些 是 新 的 ） 通 用 界 限 。 
 第 五 章 （ 优 化 ） ： 将 所 有 内 容 压 缩 进 一 章 很 困 难 （ 不 过 我 有 些 许 “ 作 弊 ” ， 因 为 我 在 第 十 一 章 中 关 于 在 线 学 习 的 内 容 留 下 了 一 些 精 彩 的 部 分 ！ ） 。 
 从 二 次 问 题 开 始 ， 通 过 线 性 代 数 推 导 梯 度 下 降 的 收 敛 性 ， 接 着 介 绍 了 凸 优 化 的 标 准 工 具 ， 然 后 统 一 呈 现 了 随 机 逼 近 法 ， 并 重 点 讨 论 了 随 机 梯 度 下 降 的 自 然 测 试 误 差 性 能 。 
 同 时 也 介 绍 了 方 差 减 少 方 法 ， 提 供 了 我 所 能 找 到 的 最 简 单 证 明 。 
 第 六 章 （ 局 部 平 均 方 法 ） ： k 近 邻 预 测 方 法 有 些 过 时 ， 但 它 是 可 以 适 应 任 何 预 测 函 数 的 最 简 单 方 法 （ 也 最 容 易 向 您 的 祖 父 母 解 释 ） 。 
 在 这 一 部 分 ， 我 重 新 使 用 了 G é r a r d B i a u 和 L u c D e v r o y e 在 2 0 1 5 年 书 中 的 交 换 性 论 证 方 法 ， 得 到 了 简 单 的 界 限 ， 且 假 设 条 件 很 少 。 
 对 于 N a d a r a y a W a t s o n 估 计 量 （ 例 如 ， 核 回 归 ） ， 我 用 B e r n s t e i n 不 等 式 给 出 了 一 个 简 单 的 证 明 。 
 第 七 章 （ 核 方 法 ） ： 这 也 是 一 个 相 对 密 集 的 章 节 ， 我 主 要 关 注 S o b o l e v 空 间 ， 以 便 能 够 刻 画 对 平 滑 性 的 适 应 性 。 
 对 于 L i p s c h i t z 连 续 的 损 失 函 数 ， 只 需 要 刻 画 逼 近 误 差 ， 我 成 功 避 免 了 积 分 算 子 。 
 对 于 平 方 损 失 ， 我 复 用 了 J a o u a d M o u r t a d a 和 L o r e n z o R o s a s c o 的 优 美 证 明 方 法 ， 得 出 了 特 别 简 单 的 期 望 值 界 限 。 
 第 八 章 （ 稀 疏 方 法 ） ： 在 这 一 章 中 ， 我 特 别 关 注 平 方 损 失 ， 并 复 用 了 P h i l i p p e R i g o l l e t 和 S a c h a T s y b a k o v 的 证 明 技 术 ， 这 些 方 法 适 用 于 约 束 或 惩 罚 估 计 ， 从 而 得 到 了 著 名 的 σ 2 k l o g ⁡ d n \ \ f r a c n σ 2 k l o g d 结 果 。 
 在 简 要 介 绍 了 统 计 文 献 中 常 见 的 固 定 设 计 处 理 （ 并 列 举 了 设 计 矩 阵 的 各 种 条 件 ） 后 ， 我 专 注 于 随 机 设 计 方 法 ， 通 过 强 凸 性 可 以 合 理 简 单 地 获 得 较 快 的 收 敛 速 度 。 
 第 九 章 （ 神 经 网 络 ） ： 我 选 择 只 介 绍 单 隐 层 神 经 网 络 ， 在 这 种 设 置 下 ， 估 计 误 差 和 优 化 误 差 的 性 质 可 以 得 到 精 确 的 表 述 ， 特 别 关 注 其 对 线 性 潜 变 量 的 适 应 性 。 
 同 样 ， 隐 藏 神 经 元 的 数 量 不 是 潜 在 的 泛 化 能 力 的 关 键 驱 动 因 素 。 
 我 还 明 确 地 将 神 经 网 络 与 核 方 法 和 随 机 特 征 的 联 系 （ 即 只 优 化 最 后 一 层 权 重 ） 做 了 联 系 。 
 这 一 “ 经 典 ” 的 处 理 方 法 在 后 面 一 章 关 于 过 参 数 化 模 型 的 讨 论 中 得 到 了 补 充 。 
 第 十 章 （ 集 成 学 习 ） ： 这 一 章 基 本 上 分 为 两 个 独 立 部 分 ， 第 一 部 分 讨 论 了 b a g g i n g 和 随 机 投 影 ， 介 绍 了 经 典 的 高 斯 随 机 投 影 ， 并 扩 展 到 非 线 性 预 测 。 
 第 二 部 分 讨 论 了 b o o s t i n g ， 试 图 统 一 不 同 领 域 的 算 法 ， 如 匹 配 追 踪 和 A d a b o o s t ， 并 给 出 了 b o o s t i n g 性 能 的 显 式 新 证 明 ， 而 没 有 额 外 的 正 则 化 假 设 。 
 虽 然 速 率 不 是 最 优 的 ， 但 这 与 实 践 中 采 用 的 （ 通 过 早 期 停 止 进 行 的 ） 正 则 化 方 法 更 加 接 近 。 
 这 里 可 能 还 有 更 锋 利 的 结 果 。 
 第 十 一 章 （ 从 在 线 学 习 到 强 盗 问 题 ） ： 这 一 章 仅 涉 及 了 更 广 泛 主 题 的 皮 毛 ， 但 对 于 在 线 学 习 ， 我 明 确 展 示 了 其 与 经 典 随 机 优 化 的 区 别 ， 并 采 用 统 一 符 号 表 示 （ 这 也 是 我 插 入 镜 像 下 降 法 的 地 方 ） 。 
 我 用 十 页 自 包 含 的 内 容 描 述 了 多 臂 强 盗 问 题 ； 虽 然 简 短 ， 但 足 以 捕 捉 主 要 思 想 ， 以 及 它 与 更 经 典 监 督 学 习 方 法 的 相 似 性 和 不 同 之 处 。 
 第 十 二 章 （ 过 参 数 化 模 型 ） ： 这 一 章 更 接 近 研 究 方 向 ， 我 尝 试 以 最 简 明 的 方 式 描 述 关 于 过 参 数 化 模 型 的 最 新 重 要 成 果 ， 如 梯 度 下 降 的 全 局 收 敛 性 、 凸 问 题 和 非 凸 问 题 的 隐 性 偏 差 （ 对 于 对 角 线 线 性 网 络 ） ， 双 重 下 降 （ 分 别 提 供 了 关 于 高 斯 数 据 和 随 机 投 影 的 简 单 和 不 那 么 简 单 的 论 证 ） ， 以 及 懒 学 习 。 
 第 十 三 章 （ 结 构 化 预 测 ） ： 这 一 章 包 含 了 最 近 的 研 究 成 果 ， 首 先 讨 论 了 多 类 别 分 类 ， 重 点 是 多 变 量 预 测 函 数 及 其 关 联 的 泛 化 性 质 （ 在 此 ， 随 机 梯 度 下 降 比 通 过 R a d e m a c h e r 平 均 得 到 的 经 验 风 险 最 小 化 结 果 给 出 了 更 好 的 界 限 ） 。 
 接 着 ， 我 以 统 一 的 方 式 呈 现 了 关 于 预 测 复 杂 输 出 的 最 新 文 献 ， 采 用 凸 代 理 函 数 ， 从 二 次 、 平 滑 到 非 平 滑 代 理 函 数 依 次 讨 论 。 
 第 十 四 章 （ 概 率 方 法 ） ： 我 首 先 回 顾 了 几 种 学 习 方 法 的 概 率 建 模 解 释 ， 主 要 关 注 通 过 识 别 损 失 和 先 验 与 对 数 密 度 之 间 的 关 系 ， 明 确 区 分 了 这 种 类 比 带 来 的 优 势 与 其 局 限 性 （ 特 别 是 ， 像 ℓ 1 \ \ e l l _ 1 ℓ 1 最 小 化 这 样 的 稀 疏 方 法 不 适 用 于 来 自 其 负 对 数 密 度 为 ℓ 1 \ \ e l l _ 1 ℓ 1 范 数 的 分 布 的 数 据 ） 。 
 接 着 ， 我 们 展 示 了 贝 叶 斯 推 断 如 何 自 然 地 引 导 模 型 选 择 标 准 ， 并 以 描 述 P A C 贝 叶 斯 分 析 结 束 本 章 ， 引 用 了 P i e r r e A l q u i e r 的 最 新 专 著 。 
 第 十 五 章 （ 泛 化 和 优 化 误 差 的 下 界 ） ： 从 研 究 的 角 度 来 看 ， 我 更 倾 向 于 通 过 设 计 和 分 析 快 速 算 法 来 贡 献 性 能 的 上 界 ， 但 我 不 得 不 承 认 ， 下 界 同 样 重 要 （ 特 别 是 当 它 们 与 上 界 一 致 时 ） 。 
 本 章 讨 论 了 优 化 下 界 （ 通 常 呈 现 了 难 以 优 化 的 函 数 ， 主 要 来 源 于 Y u r i i N e s t e r o v 的 工 作 ） ， 以 及 统 计 下 界 （ 其 中 我 使 用 了 信 息 论 的 论 证 ） 。 
 对 于 随 机 梯 度 下 降 ， 我 复 用 了 A g a r w a l 等 人 （ 2 0 1 2 ） 提 出 的 优 美 证 明 技 巧 。 
 前 言 * * 为 什 么 学 习 学 习 理 论 ？ 数 据 已 经 渗 透 到 科 学 、 工 程 、 工 业 和 个 人 生 活 的 各 个 领 域 ， 带 来 了 对 自 动 化 处 理 的 需 求 。 
 机 器 学 习 致 力 于 从 训 练 样 本 中 进 行 预 测 ， 广 泛 应 用 于 各 个 领 域 ， 包 括 大 大 小 小 的 问 题 ， 并 使 用 从 简 单 的 线 性 模 型 到 深 度 神 经 网 络 等 多 种 学 习 模 型 。 
 如 今 ， 它 已 经 成 为 算 法 工 具 箱 中 的 一 个 重 要 部 分 。 
 如 何 理 解 这 些 实 际 成 功 的 背 后 ？ 我 们 能 否 提 炼 出 一 些 原 则 ， 以 理 解 当 前 的 学 习 方 法 ， 并 指 导 新 技 术 的 设 计 ， 适 应 新 应 用 或 新 的 计 算 环 境 ？ 这 正 是 学 习 理 论 的 目 标 。 
 除 了 已 经 非 常 丰 富 且 有 趣 的 数 学 性 质 （ 因 为 它 引 入 了 许 多 数 学 领 域 的 内 容 ） ， 大 多 数 在 实 践 中 观 察 到 的 行 为 ， 原 则 上 都 可 以 通 过 足 够 的 努 力 和 理 想 化 来 理 解 。 
 反 过 来 ， 一 旦 理 解 了 这 些 行 为 ， 我 们 可 以 做 出 适 当 的 修 改 ， 获 得 更 大 的 成 功 。 
 * * 为 什 么 要 读 这 本 书 ？ 本 教 材 的 目 标 是 呈 现 学 习 理 论 中 的 旧 有 和 最 新 成 果 ， 专 注 于 目 前 最 广 泛 使 用 的 学 习 架 构 。 
 通 过 这 种 方 式 ， 本 书 阐 述 了 几 项 原 则 ， 帮 助 读 者 理 解 过 拟 合 和 欠 拟 合 现 象 ， 并 系 统 地 展 示 了 分 析 中 的 三 个 组 成 部 分 ： 估 计 误 差 、 逼 近 误 差 和 优 化 误 差 。 
 此 外 ， 本 书 的 目 标 不 仅 仅 是 展 示 学 习 方 法 在 足 够 的 数 据 下 能 够 进 行 学 习 ， 还 力 图 理 解 它 们 学 习 的 速 度 （ 或 慢 速 ） ， 特 别 关 注 如 何 通 过 适 应 特 定 结 构 加 速 学 习 过 程 （ 例 如 预 测 函 数 的 平 滑 性 或 对 低 维 子 空 间 的 依 赖 ） 。 
 本 书 适 合 理 论 导 向 的 学 生 ， 以 及 那 些 希 望 获 得 机 器 学 习 及 其 相 关 领 域 （ 如 计 算 机 视 觉 和 自 然 语 言 处 理 ） 所 使 用 算 法 的 基 本 数 学 理 解 的 学 生 。 
 此 外 ， 对 于 那 些 来 自 应 用 数 学 或 计 算 机 科 学 其 他 领 域 的 学 生 和 研 究 人 员 ， 也 非 常 适 合 他 们 学 习 机 器 学 习 背 后 的 理 论 。 
 最 后 ， 由 于 本 书 汇 集 了 许 多 简 单 的 证 明 ， 它 还 可 以 作 为 理 论 机 器 学 习 研 究 人 员 的 参 考 书 。 
 本 书 将 特 别 努 力 从 第 一 原 理 证 明 许 多 结 果 ， 同 时 尽 可 能 保 持 内 容 的 简 洁 。 
 这 自 然 会 导 致 选 择 一 些 关 键 结 果 ， 以 展 示 学 习 理 论 中 最 重 要 的 概 念 ， 并 通 过 简 单 但 相 关 的 实 例 进 行 说 明 。 
 书 中 也 会 呈 现 一 些 没 有 证 明 的 通 用 结 果 。 
 当 然 ， 第 一 原 理 的 概 念 是 主 观 的 ， 我 假 设 读 者 已 经 掌 握 了 线 性 代 数 、 概 率 论 和 微 积 分 等 基 本 知 识 。 
 此 外 ， 我 将 专 注 于 学 习 理 论 中 的 一 部 分 ， 特 别 是 那 些 可 以 在 实 践 中 运 行 的 算 法 。 
 因 此 ， 本 书 中 描 述 的 所 有 算 法 框 架 都 是 日 常 使 用 的 。 
 由 于 许 多 现 代 学 习 方 法 基 于 优 化 ， 书 中 的 第 五 章 专 门 讨 论 这 一 主 题 。 
 对 于 大 多 数 学 习 方 法 ， 我 展 示 了 一 些 简 单 的 示 范 实 验 ， 并 提 供 了 相 应 的 代 码 （ 目 前 是 M A T L A B 和 P y t h o n ， 未 来 将 包 含 J u l i a ） ， 以 便 学 生 自 己 查 看 这 些 算 法 在 合 成 实 验 中 的 简 洁 性 和 有 效 性 。 
 书 中 的 习 题 目 前 没 有 提 供 解 答 ， 目 的 是 帮 助 学 生 更 好 地 理 解 相 关 的 材 料 。 
 最 后 ， 书 的 第 三 部 分 将 深 入 讨 论 现 代 专 题 ， 如 在 线 学 习 、 集 成 学 习 、 结 构 化 预 测 和 过 参 数 化 模 型 。 
 * * 本 书 的 目 标 读 者 请 注 意 ， 这 本 书 并 不 是 一 本 机 器 学 习 的 入 门 教 材 。 
 市 面 上 已 经 有 几 本 优 秀 的 教 材 （ 例 如 ， A l p a y d i n 2 0 2 0 年 、 L i n d h o l m 等 2 0 2 2 年 、 A z e n c o t t 2 0 1 9 年 、 A l p a y d i n 2 0 2 2 年 ） 。 
 本 书 侧 重 于 学 习 理 论 — — 即 为 最 广 泛 使 用 的 学 习 算 法 推 导 数 学 保 证 ， 并 刻 画 使 特 定 算 法 框 架 成 功 的 因 素 。 
 特 别 是 鉴 于 许 多 现 代 方 法 基 于 优 化 算 法 ， 本 书 对 基 于 梯 度 的 方 法 及 其 与 机 器 学 习 的 关 系 给 予 了 较 大 关 注 。 
 本 书 的 一 个 关 键 目 标 是 ， 从 最 简 单 的 结 果 入 手 ， 使 其 更 易 理 解 ， 而 不 是 集 中 于 更 高 级 的 材 料 ， 这 些 内 容 在 初 学 时 可 能 过 于 复 杂 ， 且 提 供 的 理 解 提 升 可 能 非 常 有 限 。 
 在 整 本 书 中 ， 我 们 提 供 了 许 多 现 代 研 究 工 作 的 参 考 ， 供 读 者 深 入 了 解 。 
 * * 本 书 结 构 本 书 分 为 三 大 部 分 ： 导 言 、 核 心 部 分 和 专 题 部 分 。 
 读 者 应 当 先 阅 读 前 两 部 分 ， 以 全 面 理 解 主 要 概 念 ， 之 后 可 以 根 据 需 要 在 第 二 次 阅 读 时 选 择 性 阅 读 专 题 部 分 的 章 节 ， 或 者 在 两 学 期 的 课 程 中 学 习 。 
 每 章 都 以 概 述 将 要 讨 论 的 主 要 概 念 和 结 果 开 始 。 
 所 有 的 模 拟 实 验 可 以 在 h t t p s : / / w w w . d i . e n s . f r / ~ f b a c h / l t f p / 上 找 到 ， 并 提 供 M A T L A B 和 P y t h o n 代 码 。 
 书 中 提 供 了 大 量 的 习 题 ， 嵌 入 在 正 文 中 ， 并 用 专 门 的 段 落 标 出 ， 个 别 习 题 在 文 中 提 到 （ 例 如 ， “ 证 明 留 作 练 习 ” ） 。 
 这 些 习 题 旨 在 帮 助 学 生 加 深 对 相 关 材 料 的 理 解 ， 提 出 扩 展 或 应 用 。 
 本 书 并 未 涵 盖 所 有 主 题 ， 也 没 有 对 许 多 其 他 内 容 进 行 深 入 探 讨 。 
 市 面 上 已 有 许 多 优 秀 的 学 习 理 论 教 材 ， 涵 盖 更 广 泛 或 更 深 入 的 内 容 （ 例 如 ， C h r i s t m a n n 和 S t e i n w a r t 2 0 0 8 年 ； K o l t c h i n s k i i 2 0 1 1 年 ； M o h r i 等 2 0 1 8 年 ； S h a l e v S h w a r t z 和 B e n D a v i d 2 0 1 4 年 ） 。 
 同 时 ， 还 可 以 参 考 A l e x a n d e r R a k h l i n 和 K a r t h i k S r i d h a r a n ， 以 及 M i c h a e l W o l f 的 精 彩 笔 记 。 
 特 别 地 ， 本 书 主 要 聚 焦 于 实 值 预 测 函 数 ， 因 为 它 已 成 为 现 代 机 器 学 习 技 术 的 事 实 标 准 ， 即 使 在 预 测 离 散 值 输 出 时 也 适 用 。 
 因 此 ， 尽 管 V a p n i k C h e r v o n e n k i s 维 度 在 历 史 上 的 重 要 性 和 影 响 至 关 重 要 ， 我 决 定 不 在 本 书 中 介 绍 它 ， 而 是 基 于 R a d e m a c h e r 复 杂 性 直 接 推 导 通 用 界 限 。 
 专 注 于 实 值 预 测 函 数 使 得 最 小 二 乘 回 归 成 为 本 书 理 论 的 核 心 内 容 ， 这 对 于 学 生 来 说 非 常 有 意 义 。 
 此 外 ， 这 也 为 与 相 关 的 统 计 学 文 献 建 立 联 系 提 供 了 便 利 。 
 一 些 领 域 ， 如 在 线 学 习 或 概 率 方 法 ， 在 本 书 中 被 简 要 描 述 ， 以 便 与 经 典 理 论 建 立 联 系 ， 并 鼓 励 读 者 通 过 专 门 的 书 籍 进 一 步 学 习 。 
 在 本 书 中 ， 我 还 包 括 了 第 1 2 章 关 于 过 参 数 化 模 型 和 第 1 3 章 关 于 结 构 化 预 测 ， 这 些 内 容 介 绍 了 机 器 学 习 中 的 现 代 专 题 。 
 更 广 泛 地 讲 ， 第 三 部 分 （ 专 题 部 分 ） 的 目 标 是 ， 在 每 一 章 中 介 绍 新 概 念 ， 同 时 保 持 与 核 心 内 容 的 联 系 ， 并 使 用 统 一 的 符 号 表 示 。 
 * * 如 何 使 用 本 书 ？ 前 九 章 （ 按 顺 序 ， 不 包 括 “ 钻 石 部 分 ” ） 适 合 于 一 学 期 的 高 年 级 本 科 或 研 究 生 课 程 ， 在 进 行 过 机 器 学 习 的 入 门 课 程 后 阅 读 。 
 接 下 来 的 六 章 大 多 可 以 按 任 意 顺 序 阅 读 ， 用 于 加 深 对 某 些 专 题 的 理 解 ； 它 们 可 以 作 为 作 业 （ 通 过 习 题 ） 阅 读 ， 或 在 较 长 的 （ 例 如 两 学 期 ） 课 程 中 教 授 。 
 本 书 的 设 计 也 便 于 自 学 ， 前 九 章 按 顺 序 阅 读 ， 最 后 六 章 则 可 以 随 机 阅 读 。 
 在 任 何 情 况 下 ， 第 1 章 关 于 数 学 预 备 知 识 的 部 分 可 以 快 速 阅 读 ， 之 后 在 相 关 章 节 需 要 时 深 入 学 习 相 关 概 念 。 
 成 为 V I P 会 员 查 看 完 整 内 容 h t t p s : / / f r a n c i s b a c h . c o m / m y b o o k i s o u t / L e a r n i n g T h e o r y f r o m F i r s t P r i n c i p l e s 点 赞 并 收 藏 3 3 暂 时 没 有 读 者 5 1 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 普 适 人 工 智 能 · 书 籍 · 普 适 智 能 体 · 1 2 月 2 4 日 【 新 书 】 《 普 适 人 工 智 能 导 论 》 D e e p M i n d H u t t e r 等 编 著 ， 附 p d f 与 S l i d e s 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ h t t p : / / w w w . h u t t e r 1 . n e t / a i / u a i b o o k 2 . h t m 这 本 书 提 供 了 对 普 适 人 工 智 能 （ U A I ） 的 温 和 介 绍 ， U A I 是 一 种 理 论 ， 为 智 能 体 在 未 知 环 境 中 进 行 智 能 行 为 提 供 了 形 式 化 的 基 础 。 
 U A I 最 早 在 [ H u t 0 0 , H u t 0 5 b ] 中 提 出 ， 提 供 了 一 个 框 架 ， 在 这 个 框 架 中 ， 几 乎 所 有 其 他 的 人 工 智 能 问 题 都 可 以 被 表 述 ， 并 且 可 以 提 出 相 应 的 解 决 理 论 。 
 U A I 结 合 了 顺 序 决 策 理 论 、 贝 叶 斯 推 理 和 算 法 信 息 理 论 的 思 想 ， 构 建 了 A I X I ， 这 是 一 种 最 优 的 强 化 学 习 智 能 体 ， 能 够 在 未 知 环 境 中 学 习 如 何 做 出 最 优 决 策 。 
 A I X I 是 智 能 行 为 的 理 论 黄 金 标 准 。 
 本 书 涵 盖 了 U A I 的 理 论 与 实 践 两 个 方 面 。 
 通 过 上 下 文 树 加 权 （ C o n t e x t T r e e W e i g h t i n g ， C T W ） 可 以 高 效 地 进 行 贝 叶 斯 更 新 ， 规 划 则 可 以 通 过 蒙 特 卡 洛 树 搜 索 （ M o n t e C a r l o T r e e S e a r c h ） 进 行 近 似 。 
 本 书 提 供 了 可 供 读 者 实 现 的 算 法 ， 以 及 与 之 进 行 比 较 的 实 验 结 果 。 
 这 些 算 法 用 于 逼 近 A I X I 。 
 本 书 最 后 通 过 哲 学 讨 论 人 工 通 用 智 能 （ A r t i f i c i a l G e n e r a l I n t e l l i g e n c e , A G I ） 问 题 进 行 总 结 ： 智 能 体 是 否 真 的 能 够 被 构 造 出 来 ？ 它 们 的 构 造 是 否 不 可 避 免 ？ 它 们 被 构 造 出 来 的 潜 在 后 果 是 什 么 ？ 介 绍 第 一 章 首 先 概 述 了 人 工 智 能 （ A I ） 问 题 ， 并 解 释 了 我 们 为 何 希 望 解 决 这 个 问 题 。 
 然 后 ， 我 们 非 正 式 地 介 绍 了 普 适 人 工 智 能 （ U A I ） 方 法 ， 以 及 这 种 方 法 与 其 他 解 决 A I 问 题 的 方 案 相 比 所 具 有 的 各 种 优 势 。 
 第 二 章 介 绍 了 数 学 背 景 和 必 要 的 前 置 知 识 ， 包 括 （ 贝 叶 斯 ） 概 率 论 与 统 计 学 、 信 息 论 、 可 计 算 性 理 论 以 及 （ 算 法 ） 信 息 论 。 
 算 法 预 测 第 三 章 讨 论 了 算 法 预 测 的 问 题 。 
 具 体 而 言 ， 我 们 提 供 了 关 于 普 适 贝 叶 斯 混 合 （ u n i v e r s a l B a y e s i a n m i x t u r e ） 理 论 结 果 ， 并 展 示 了 它 是 如 何 从 理 论 上 解 决 预 测 问 题 的 。 
 贝 叶 斯 混 合 的 一 个 缺 点 是 它 的 计 算 可 能 非 常 复 杂 。 
 第 四 章 提 供 了 一 个 连 贯 的 解 释 ， 介 绍 了 一 种 实 用 且 可 实 现 的 算 法 — — 上 下 文 树 加 权 （ C T W ） ， 该 算 法 用 于 计 算 贝 叶 斯 混 合 并 进 行 预 测 。 
 第 五 章 进 一 步 扩 展 了 C T W 算 法 ， 允 许 进 行 更 一 般 的 预 测 。 
 普 适 智 能 体 的 家 族 第 六 章 介 绍 了 基 于 历 史 的 强 化 学 习 框 架 ， 并 展 示 了 如 何 在 这 个 框 架 中 捕 捉 A I 问 题 。 
 第 七 章 提 供 了 强 化 学 习 问 题 的 贝 叶 斯 解 决 方 案 — — A I X I ， 并 证 明 它 是 最 智 能 的 智 能 体 。 
 第 八 章 讨 论 了 在 一 般 强 化 学 习 框 架 中 的 各 种 最 优 性 度 量 和 概 念 ， 并 阐 述 了 为 何 某 些 最 优 性 概 念 可 能 比 其 他 概 念 更 受 偏 爱 。 
 第 九 章 介 绍 了 普 适 智 能 体 的 家 族 ， 其 中 许 多 是 A I X I 智 能 体 的 扩 展 和 变 体 ， 并 解 释 了 这 些 智 能 体 如 何 扩 展 U A I 理 论 。 
 第 十 章 引 入 了 博 弈 论 的 概 念 ， 并 解 释 了 它 们 如 何 应 用 于 多 智 能 体 视 角 下 的 强 化 学 习 问 题 。 
 特 别 是 ， 提 出 了 解 决 “ 真 理 之 粒 ” 问 题 的 方 法 。 
 逼 近 普 适 智 能 体 第 十 一 章 描 述 了 A I X I 智 能 体 的 一 个 简 单 逼 近 方 法 ， 该 方 法 能 够 学 习 并 玩 简 单 游 戏 。 
 第 十 二 章 进 一 步 介 绍 了 一 种 更 复 杂 的 A I X I 逼 近 方 法 ， 基 于 C T W 算 法 和 蒙 特 卡 洛 树 搜 索 （ M o n t e C a r l o T r e e S e a r c h ） ， 该 方 法 能 够 在 更 复 杂 的 游 戏 中 表 现 良 好 。 
 我 们 还 提 供 了 其 他 一 些 被 提 出 的 A I X I 和 U A I 的 逼 近 算 法 ， 并 通 过 讨 论 它 们 的 优 缺 点 来 激 励 这 些 算 法 的 提 出 。 
 第 十 三 章 探 讨 了 普 适 智 能 体 的 （ 不 可 ） 计 算 性 ， 并 提 出 了 最 接 近 的 可 计 算 A I X I 逼 近 — — A I X I t l 。 
 替 代 方 法 第 十 四 章 深 入 探 讨 了 解 决 一 般 强 化 学 习 问 题 的 替 代 方 法 — — 特 征 强 化 学 习 （ F e a t u r e R e i n f o r c e m e n t L e a r n i n g ） 。 
 我 们 展 示 了 从 理 论 和 实 践 的 角 度 来 看 ， 采 用 这 种 方 法 是 非 常 有 吸 引 力 的 。 
 安 全 性 与 讨 论 第 十 五 章 概 述 了 与 安 全 构 建 超 级 智 能 体 相 关 的 诸 多 问 题 ， 并 探 讨 了 如 何 在 U A I 框 架 内 研 究 这 些 问 题 。 
 我 们 讨 论 了 在 U A I 框 架 中 提 出 的 、 可 以 解 决 这 些 问 题 的 一 些 潜 在 解 决 方 案 。 
 第 十 六 章 讨 论 了 迄 今 为 止 所 涉 及 的 许 多 哲 学 问 题 ， 包 括 支 持 与 反 对 人 工 通 用 智 能 （ A G I ） 可 能 存 在 的 论 点 ， 以 及 智 能 本 身 的 哲 学 与 数 学 问 题 。 
 内 容 ： * P a r t I : I n t r o d u c t i o n * P a r t I I : A l g o r i t h m i c P r e d i c t i o n * P a r t I I I : A F a m i l y o f U n i v e r s a l A g e n t s * P a r t I V : A p p r o x i m a t i n g U n i v e r s a l A g e n t s * P a r t V : A l t e r n a t i v e A p p r o a c h e s * P a r t V I : S a f e t y a n d D i s c u s s i o n 成 为 V I P 会 员 查 看 完 整 内 容 h t t p : / / w w w . h u t t e r 1 . n e t / a i / u a i b o o k 2 . h t m 【 B o o k 】 A n I n t r o d u c t i o n t o U n i v e r s a l A r t i f i c i a l I n t e l l i g e n c e 【 S l i d e s 】 A n I n t r o d u c t i o n t o U n i v e r s a l A r t i f i c i a l I n t e l l i g e n c e 【 B o o k 】 A n I n t r o d u c t i o n t o U n i v e r s a l A r t i f i c i a l I n t e l l i g e n c e 点 赞 并 收 藏 2 3 暂 时 没 有 读 者 3 9 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 书 籍 · 生 成 式 人 工 智 能 · 检 索 增 强 生 成 · L l a m a I n d e x · D e e p L a k e · 1 2 月 1 5 日 【 新 书 】 基 于 R A G 的 生 成 式 A I ： 使 用 L l a m a I n d e x 、 D e e p L a k e 和 P i n e c o n e 构 建 自 定 义 的 检 索 增 强 生 成 管 道 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 书 籍 简 介 最 小 化 A I 幻 觉 ， 构 建 准 确 的 自 定 义 生 成 式 A I 管 道 ， 利 用 嵌 入 式 向 量 数 据 库 和 集 成 的 人 类 反 馈 来 实 现 检 索 增 强 生 成 （ R A G ） 购 买 本 书 的 纸 质 版 或 K i n d l e 版 即 包 含 免 费 的 P D F 格 式 电 子 书 主 要 特 点 实 现 R A G 的 可 追 溯 输 出 ， 将 每 个 响 应 与 其 源 文 档 链 接 ， 构 建 可 靠 的 多 模 态 对 话 智 能 体 在 管 道 中 集 成 R A G 、 实 时 人 类 反 馈 改 进 和 知 识 图 谱 ， 交 付 准 确 的 生 成 式 A I 模 型 在 动 态 检 索 数 据 集 与 微 调 静 态 数 据 之 间 平 衡 成 本 与 性 能 书 籍 描 述 基 于 R A G 的 生 成 式 A I 提 供 了 构 建 有 效 的 L L M （ 大 语 言 模 型 ） 、 计 算 机 视 觉 和 生 成 式 A I 系 统 的 路 线 图 ， 平 衡 了 性 能 与 成 本 。 
 本 书 详 细 探 讨 了 R A G 及 其 设 计 、 管 理 和 控 制 多 模 态 A I 管 道 的 方 式 。 
 通 过 将 输 出 与 可 追 溯 的 源 文 档 连 接 ， R A G 提 高 了 输 出 的 准 确 性 和 上 下 文 相 关 性 ， 提 供 了 一 种 动 态 方 法 来 管 理 大 量 信 息 。 
 该 书 向 您 展 示 了 如 何 构 建 R A G 框 架 ， 提 供 有 关 向 量 存 储 、 分 块 、 索 引 和 排 名 的 实 用 知 识 。 
 您 将 发 现 优 化 项 目 性 能 的 技 巧 ， 并 更 好 地 理 解 您 的 数 据 ， 包 括 使 用 自 适 应 R A G 和 人 类 反 馈 来 提 高 检 索 准 确 性 、 平 衡 R A G 与 微 调 、 实 施 动 态 R A G 以 增 强 实 时 决 策 以 及 通 过 知 识 图 谱 可 视 化 复 杂 数 据 。 
 您 将 接 触 到 诸 如 L l a m a I n d e x 和 D e e p L a k e 这 样 的 框 架 ， P i n e c o n e 和 C h r o m a 等 向 量 数 据 库 ， 以 及 H u g g i n g F a c e 和 O p e n A I 的 模 型 。 
 本 书 结 束 时 ， 您 将 掌 握 实 施 智 能 解 决 方 案 的 技 能 ， 使 您 在 从 生 产 到 客 户 服 务 的 各 个 项 目 中 保 持 竞 争 力 。 
 您 将 学 到 的 内 容 扩 展 R A G 管 道 ， 以 高 效 处 理 大 数 据 集 采 用 减 少 幻 觉 并 确 保 准 确 响 应 的 技 术 实 施 索 引 技 术 ， 通 过 可 追 溯 和 透 明 的 输 出 提 高 A I 准 确 性 定 制 和 扩 展 跨 领 域 的 R A G 驱 动 生 成 式 A I 系 统 探 索 如 何 使 用 D e e p L a k e 和 P i n e c o n e 进 行 高 效 和 快 速 的 数 据 检 索 构 建 以 现 实 世 界 数 据 为 基 础 的 稳 健 生 成 式 A I 系 统 将 文 本 和 图 像 数 据 结 合 ， 为 A I 提 供 更 丰 富 、 更 具 信 息 性 的 响 应 适 合 读 者 本 书 适 合 数 据 科 学 家 、 A I 工 程 师 、 机 器 学 习 工 程 师 和 M L O p s 工 程 师 。 
 如 果 您 是 解 决 方 案 架 构 师 、 软 件 开 发 人 员 、 产 品 经 理 或 项 目 经 理 ， 想 要 提 升 构 建 R A G 应 用 程 序 的 决 策 过 程 ， 那 么 本 书 将 对 您 非 常 有 帮 助 。 
 目 录 为 什 么 选 择 检 索 增 强 生 成 （ R A G ） ？ 使 用 D e e p L a k e 和 O p e n A I 嵌 入 向 量 存 储 使 用 L l a m a I n d e x 、 D e e p L a k e 和 O p e n A I 构 建 基 于 索 引 的 R A G 无 人 机 技 术 的 多 模 态 模 块 化 R A G 利 用 专 家 人 类 反 馈 提 升 R A G 性 能 使 用 P i n e c o n e 扩 展 R A G 银 行 客 户 数 据 使 用 W i k i p e d i a A P I 和 L l a m a I n d e x 构 建 可 扩 展 的 知 识 图 谱 驱 动 R A G 使 用 C h r o m a 和 H u g g i n g F a c e L l a m a 进 行 动 态 R A G 赋 能 A I 模 型 ： 微 调 R A G 数 据 和 人 类 反 馈 使 用 P i n e c o n e 和 O p e n A I 进 行 视 频 素 材 制 作 的 R A G 评 审 书 评 “ 本 书 以 实 践 为 导 向 ， 提 供 了 从 基 础 概 念 到 复 杂 实 现 的 清 晰 路 径 。 
 它 对 R A G 概 念 的 详 细 解 释 和 真 实 世 界 代 码 实 现 使 得 它 对 初 学 者 和 经 验 丰 富 的 专 业 人 士 都 非 常 可 读 。 
 一 个 显 著 的 亮 点 是 本 书 对 扩 展 R A G 系 统 的 挑 战 的 独 特 见 解 ， 并 提 供 了 关 于 如 何 管 理 大 数 据 集 、 优 化 查 询 性 能 和 控 制 成 本 的 实 际 指 导 。 
 此 外 ， 关 于 模 块 化 R A G 和 微 调 的 章 节 提 供 了 可 操 作 的 策 略 ， 这 些 策 略 与 我 在 构 建 基 于 对 话 A I 和 R A G 的 A I 驱 动 的 心 理 健 康 管 理 应 用 中 的 经 验 高 度 契 合 。 
 书 中 对 人 类 反 馈 的 重 视 也 非 常 重 要 ， 它 展 示 了 专 家 输 入 如 何 优 化 数 据 ， 增 强 A I 响 应 的 可 靠 性 ， 使 A I 输 出 与 人 类 价 值 对 齐 。 
 本 书 对 性 能 优 化 的 见 解 以 及 人 类 反 馈 的 集 成 使 它 在 该 领 域 成 为 一 个 突 出 的 资 源 。 
 ” — — H a r s h a S r i v a t s a ， S t e a l t h A I 创 始 人 兼 A I 产 品 负 责 人 ， 前 A p p l e 和 A c c e n t u r e 员 工 “ 本 书 提 供 了 一 个 极 为 全 面 的 深 入 探 讨 ， 涵 盖 了 从 多 模 态 数 据 类 型 和 各 种 R A G 架 构 到 像 评 估 、 知 识 图 谱 以 及 人 类 反 馈 微 调 等 高 级 话 题 。 
 真 正 值 得 称 道 的 是 ， R o t h m a n 能 够 无 缝 地 解 释 复 杂 的 概 念 ， 使 得 材 料 对 各 个 层 次 的 读 者 都 既 可 读 又 富 有 洞 察 力 。 
 无 论 您 是 想 构 建 端 到 端 的 R A G 解 决 方 案 ， 还 是 只 是 想 增 强 对 前 沿 A I 系 统 的 理 解 ， 本 书 都 将 通 过 其 全 面 且 实 用 的 内 容 深 化 您 的 知 识 ， 并 涵 盖 多 个 不 同 的 应 用 场 景 。 
 ” — — S u r n j a n i D j o k o ， 博 士 ， S V P ， 专 门 从 事 M L / A I 的 领 导 者 ， U S P B A 创 新 实 验 室 负 责 人 作 者 简 介 D e n i s R o t h m a n 毕 业 于 索 邦 大 学 和 巴 黎 第 七 大 学 ， 在 学 生 时 期 ， 他 编 写 并 注 册 了 早 期 的 w o r d 2 v e c t o r 嵌 入 和 w o r d p i e c e 标 记 化 解 决 方 案 的 专 利 。 
 他 创 办 了 一 家 公 司 ， 专 注 于 部 署 A I ， 并 成 为 了 第 一 批 A I 认 知 N L P 聊 天 机 器 人 之 一 的 作 者 ， 该 聊 天 机 器 人 被 用 作 M o ë t e t C h a n d o n （ L V M H 的 一 部 分 ） 等 语 言 教 学 工 具 。 
 D e n i s 迅 速 成 为 了 解 释 性 A I 的 专 家 ， 将 可 解 释 、 基 于 接 受 的 数 据 和 接 口 整 合 进 实 施 的 解 决 方 案 中 ， 涵 盖 了 航 空 航 天 、 服 装 和 供 应 链 等 重 要 企 业 项 目 。 
 他 的 核 心 信 念 是 ， 只 有 当 你 教 会 别 人 如 何 做 某 件 事 时 ， 你 才 能 真 正 理 解 它 。 
 成 为 V I P 会 员 查 看 完 整 内 容 R A G D r i v e n G e n e r a t i v e A I : B u i l d c u s t o m r e t r i e v a l a u g m e n t e d g e n e r a t i o n p i p e l i n e s w i t h L l a m a I n d e x , D e e p L a k e , a n d P i n e c o n e 点 赞 并 收 藏 2 6 暂 时 没 有 读 者 3 3 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 因 果 推 断 · 书 籍 · 1 2 月 2 0 日 【 新 书 】 《 因 果 推 断 入 门 》 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 书 籍 简 介 过 去 十 年 ， 由 于 因 果 推 断 在 生 物 医 学 研 究 、 社 会 科 学 、 人 工 智 能 等 领 域 的 广 泛 应 用 ， 因 果 推 断 研 究 与 教 育 引 起 了 极 大 的 关 注 。 
 本 教 材 基 于 作 者 在 加 利 福 尼 亚 大 学 伯 克 利 分 校 教 授 的 因 果 推 断 课 程 ， 过 去 七 年 来 积 累 的 教 学 经 验 ， 要 求 读 者 具 备 基 础 的 概 率 论 、 统 计 推 断 、 线 性 回 归 和 逻 辑 回 归 知 识 。 
 书 中 假 设 读 者 对 因 果 推 断 的 了 解 较 少 ， 并 在 附 录 中 回 顾 了 基 本 的 概 率 和 统 计 概 念 。 
 本 书 从 统 计 学 角 度 讲 解 因 果 推 断 ， 并 包 括 来 自 生 物 统 计 学 和 计 量 经 济 学 的 示 例 与 应 用 。 
 主 要 特 点 ： 所 有 R 代 码 和 数 据 集 可 在 哈 佛 数 据 平 台 （ H a r v a r d D a t a v e r s e ） 获 取 。 
 * 为 教 师 提 供 解 答 手 册 。 
 * 包 含 1 0 0 多 个 习 题 。 
 * 本 书 适 合 高 级 本 科 生 或 研 究 生 层 次 的 因 果 推 断 课 程 ， 亦 适 用 于 统 计 学 和 生 物 统 计 学 系 的 博 士 后 及 博 士 生 课 程 。 
 书 评 “ 这 本 书 提 供 了 统 计 学 家 对 因 果 推 断 的 视 角 ， 对 从 观 察 数 据 中 推 断 因 果 关 系 的 统 计 悖 论 进 行 了 宝 贵 的 回 顾 ， 并 将 这 些 悖 论 与 P e a r l 的 有 向 无 环 图 （ D A G s ） 联 系 起 来 。 
 关 于 匹 配 的 文 献 概 述 是 我 见 过 的 最 好 的 ， 书 中 包 含 的 R 代 码 也 是 一 个 巨 大 的 优 势 。 
 这 本 书 将 是 高 级 本 科 生 和 硕 士 项 目 中 因 果 推 断 的 极 好 入 门 教 材 。 
 ” — — 布 莱 恩 · 道 德 教 授 ， 美 国 明 尼 阿 波 利 斯 大 学 《 因 果 推 断 入 门 》 由 彭 丁 所 著 ， 作 为 该 领 域 的 权 威 ， 本 书 的 技 术 水 平 使 其 区 别 于 现 有 的 因 果 推 断 教 材 。 
 对 于 具 有 良 好 数 学 和 统 计 学 背 景 的 公 共 卫 生 、 医 学 和 社 会 科 学 领 域 的 学 生 和 研 究 人 员 来 说 ， 这 本 书 将 是 一 本 宝 贵 的 资 源 。 
 书 中 的 习 题 引 导 读 者 通 过 重 要 的 结 果 ， 附 录 复 习 了 关 键 的 数 学 和 统 计 概 念 ， 并 包 含 了 精 心 编 写 的 R 代 码 ， 极 大 地 帮 助 理 论 转 化 为 实 践 。 
 ” — — 埃 本 · 凯 纳 教 授 ， 美 国 俄 亥 俄 州 立 大 学 “ 彭 丁 教 授 在 这 本 书 中 做 了 一 件 令 人 印 象 深 刻 的 事 情 — — 为 因 果 推 断 提 供 了 一 个 清 晰 、 精 准 且 全 面 的 介 绍 。 
 这 本 书 是 任 何 有 兴 趣 理 解 因 果 推 断 的 人 必 备 之 作 。 
 我 强 烈 推 荐 。 
 ” — — 雨 果 · 贾 勒 斯 教 授 ， 美 国 雪 城 大 学 麦 克 斯 韦 公 民 与 公 共 事 务 学 院 作 者 简 介 彭 丁 是 加 利 福 尼 亚 大 学 伯 克 利 分 校 统 计 学 系 的 副 教 授 。 
 他 的 研 究 主 要 集 中 在 因 果 推 断 及 其 应 用 领 域 。 
 成 为 V I P 会 员 查 看 完 整 内 容 A F i r s t C o u r s e i n C a u s a l I n f e r e n c e 点 赞 并 收 藏 2 0 暂 时 没 有 读 者 3 3 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 A I 与 军 事 · 军 事 气 象 · 书 籍 · 1 2 月 1 1 日 《 军 事 与 气 候 安 全 ： 概 念 、 战 略 和 伙 伴 关 系 》 最 新 3 6 6 页 书 籍 专 知 会 员 服 务 专 知 ， 提 供 专 业 可 信 的 知 识 分 发 服 务 ， 让 认 知 协 作 更 快 更 好 ！ 气 候 变 化 和 资 源 的 过 度 使 用 严 重 影 响 着 全 世 界 人 类 的 福 祉 ， 并 导 致 安 全 风 险 和 冲 突 不 断 增 加 （ S c h e f f r e n a & B a t t a g l i n i ， 2 0 1 1 年 ） 。 
 虽 然 气 候 变 化 的 影 响 是 全 球 性 的 ， 但 其 对 获 取 食 物 、 水 、 能 源 和 基 础 设 施 的 影 响 以 及 相 关 的 安 全 风 险 在 世 界 不 同 地 区 存 在 很 大 差 异 （ R o c k s t r ö m 等 人 ， 2 0 2 3 年 ； S c h e f f r e n a & B a t t a g l i n i ， 2 0 1 1 年 ） 。 
 如 图 0 . 1 所 示 （ 摘 自 R o c k s t r ö m 等 人 ， 2 0 2 3 年 ； S c h e f f r e n a & B a t t a g l i n i ， 2 0 1 1 年 ） ， 气 候 变 化 影 响 的 许 多 热 点 地 区 都 位 于 中 东 、 阿 富 汗 和 乌 克 兰 等 冲 突 地 区 。 
 这 些 冲 突 地 区 的 资 源 稀 缺 往 往 会 加 剧 紧 张 局 势 ， 使 冲 突 恶 化 ， 敌 对 派 别 还 可 能 利 用 资 源 稀 缺 向 当 地 居 民 施 压 （ M i d d e n d o r p ， 2 0 2 3 年 ； S c h e f f r e n a & B a t t a g l i n i ， 2 0 1 1 年 ） 。 
 此 外 ， 气 候 变 化 增 加 了 自 然 灾 害 的 风 险 （ G h a z a l i 等 人 ， 2 0 1 8 年 ； A a l s t ， 2 0 0 6 年 ） 。 
 这 些 自 然 灾 害 给 军 队 和 当 地 居 民 带 来 了 安 全 挑 战 （ A a l s t ， 2 0 0 6 ； S c h e f f r e n a & B a t t a g l i n i ， 2 0 1 1 ） 。 
 因 此 ， 气 候 与 安 全 直 接 相 互 影 响 ， 因 此 军 方 需 要 了 解 气 候 与 安 全 的 关 系 ， 以 及 如 何 通 过 设 计 气 候 安 全 战 略 来 促 进 适 应 和 缓 解 。 
 图 0 . 1 . 地 球 系 统 边 界 局 部 越 界 数 量 概 览 ， 表 明 世 界 上 受 气 候 、 自 然 生 态 系 统 、 水 系 统 、 营 养 循 环 和 大 气 系 统 变 化 影 响 最 严 重 的 地 区 。 
 本 书 从 军 事 角 度 回 顾 了 气 候 与 安 全 的 关 系 ， 并 提 出 了 气 候 安 全 战 略 的 设 计 以 及 如 何 为 适 应 和 缓 解 相 关 挑 战 做 出 贡 献 。 
 第 1 部 分 回 顾 了 对 气 候 与 安 全 关 系 的 理 解 。 
 第 2 部 分 评 估 了 气 候 安 全 战 略 的 潜 在 设 计 。 
 第 3 部 分 回 顾 了 军 队 对 气 候 变 化 的 适 应 。 
 最 后 ， 第 4 部 分 从 陆 地 、 海 上 、 空 中 行 动 以 及 太 阳 能 地 球 工 程 的 角 度 讨 论 了 军 队 对 减 缓 气 候 变 化 的 潜 在 贡 献 。 
 通 过 分 析 气 候 对 全 球 安 全 和 军 事 行 动 的 影 响 ， 本 书 就 气 候 安 全 和 军 事 的 相 互 影 响 提 供 了 一 个 独 特 且 亟 需 的 视 角 ， 并 为 适 应 和 缓 解 由 此 带 来 的 挑 战 提 供 了 建 议 。 
 第 一 部 分 从 丰 富 的 军 事 经 验 、 灾 害 研 究 、 气 候 情 报 和 小 武 器 价 格 等 角 度 分 析 了 气 候 与 安 全 的 关 系 。 
 在 第 一 章 中 ， 荷 兰 前 国 防 参 谋 长 汤 姆 米 登 多 尔 普 （ T o m M i d d e n d o r p ） 通 过 访 谈 强 调 了 气 候 变 化 、 安 全 和 军 事 之 间 的 主 要 联 系 ， 并 概 述 了 气 候 变 化 对 地 缘 政 治 和 地 方 的 影 响 以 及 军 队 在 适 应 气 候 变 化 中 的 作 用 。 
 第 2 章 回 顾 了 过 去 五 十 年 灾 害 研 究 的 主 要 范 式 转 变 和 应 吸 取 的 经 验 教 训 ， 并 强 调 了 气 候 安 全 自 身 的 一 些 特 点 。 
 第 3 章 概 述 了 气 候 情 报 。 
 文 章 强 调 了 额 外 军 事 任 务 的 潜 在 范 围 和 方 法 ， 以 支 持 气 候 情 报 的 数 据 收 集 ， 以 及 将 气 候 情 报 能 力 整 合 到 国 防 和 其 他 领 域 。 
 第 4 章 通 过 小 武 器 价 格 与 气 候 事 件 之 间 的 相 关 性 ， 探 讨 了 重 大 干 旱 与 地 方 冲 突 可 能 性 之 间 的 关 系 ， 并 指 出 干 旱 发 生 后 地 方 冲 突 和 武 器 价 格 会 上 升 ， 但 仅 限 于 脆 弱 国 家 。 
 最 后 ， 本 部 分 通 过 经 验 、 情 报 、 灾 害 研 究 和 数 据 分 析 ， 对 气 候 与 安 全 之 间 的 关 系 进 行 了 广 泛 回 顾 。 
 第 二 部 分 分 五 章 讨 论 气 候 安 全 战 略 和 政 策 的 设 计 及 其 所 需 的 伙 伴 关 系 。 
 第 5 章 提 出 了 一 个 气 候 安 全 干 预 框 架 ， 以 支 持 业 务 和 战 略 决 策 。 
 该 框 架 以 广 泛 的 研 究 为 基 础 ， 采 用 了 基 于 综 合 和 多 层 次 利 益 相 关 者 方 法 的 实 施 逻 辑 ， 并 在 伊 拉 克 的 案 例 研 究 中 得 到 了 验 证 。 
 随 后 ， 第 6 章 分 析 了 荷 兰 的 战 略 和 政 策 如 何 应 对 气 候 安 全 问 题 。 
 然 后 ， 它 建 议 将 气 候 安 全 纳 入 发 展 、 外 交 和 防 务 （ 3 D ） 活 动 ， 作 为 3 D 方 法 的 一 个 组 成 部 分 ， 并 在 国 际 气 候 行 动 中 考 虑 气 候 安 全 和 冲 突 风 险 。 
 第 7 章 探 讨 了 气 候 误 报 的 影 响 ， 回 顾 了 另 一 种 因 果 校 正 方 法 对 尽 量 减 少 气 候 误 报 影 响 的 意 义 。 
 随 后 几 章 通 过 探 讨 国 防 工 业 行 为 准 则 ， 重 点 关 注 与 工 业 界 的 伙 伴 关 系 。 
 第 8 章 探 讨 了 最 大 的 国 防 承 包 商 的 行 为 准 则 ， 并 确 定 了 国 防 采 购 和 供 应 链 管 理 中 的 机 遇 。 
 第 9 章 提 出 了 一 个 概 念 模 型 ， 以 确 定 有 关 环 境 可 持 续 性 绩 效 的 最 重 要 政 策 决 定 ， 这 些 决 定 应 在 维 护 信 息 安 全 的 同 时 ， 关 注 操 作 耐 力 和 环 境 可 持 续 性 。 
 总 之 ， 这 一 部 分 建 议 与 所 有 利 益 相 关 方 共 同 解 决 气 候 安 全 战 略 问 题 ， 并 与 国 防 工 业 合 作 ， 推 动 作 战 耐 力 和 环 境 可 持 续 性 方 面 的 创 新 。 
 第 三 部 分 探 讨 了 武 装 部 队 如 何 适 应 不 断 变 化 的 全 球 气 候 安 全 条 件 。 
 在 这 一 部 分 中 ， 首 先 在 第 1 0 章 中 回 顾 了 军 队 在 危 机 管 理 和 灾 害 响 应 中 不 断 变 化 的 角 色 。 
 在 应 对 危 机 和 灾 害 时 ， 提 出 了 军 事 态 势 的 三 个 转 变 ： 军 队 需 要 从 安 全 思 维 转 变 为 人 道 主 义 思 维 ， 从 自 主 行 动 转 变 为 军 民 行 动 ， 从 危 机 应 对 转 变 为 提 高 复 原 力 。 
 第 1 1 章 提 出 了 新 的 抗 洪 应 急 干 预 措 施 ， 作 为 军 队 角 色 转 变 的 一 部 分 。 
 该 章 还 回 顾 了 军 队 在 应 急 响 应 中 的 作 用 ， 并 介 绍 了 在 高 水 位 条 件 下 的 大 规 模 实 验 结 果 ， 展 示 了 新 颖 的 防 洪 方 法 。 
 这 些 方 法 可 用 于 本 国 或 远 方 行 动 。 
 最 后 ， 第 1 2 章 提 出 了 一 个 保 护 海 上 重 要 但 也 脆 弱 的 可 持 续 能 源 基 础 设 施 的 新 框 架 。 
 该 框 架 以 定 量 作 战 分 析 方 法 为 基 础 ， 提 供 了 优 化 监 视 巡 逻 的 结 构 ， 以 适 应 能 源 安 全 中 新 的 脆 弱 性 。 
 总 之 ， 军 方 需 要 为 危 机 管 理 和 灾 难 应 对 中 的 合 作 做 好 准 备 ， 考 虑 使 用 新 方 法 预 防 洪 水 ， 并 确 保 在 国 内 和 全 球 行 动 中 保 护 重 要 的 能 源 基 础 设 施 。 
 最 后 一 部 分 从 陆 地 、 海 上 和 空 中 行 动 的 角 度 阐 述 了 军 队 对 减 缓 气 候 变 化 的 贡 献 ， 并 对 太 阳 能 地 球 工 程 对 气 候 安 全 和 国 家 主 权 的 威 胁 进 行 了 最 后 的 回 顾 。 
 第 1 3 章 回 顾 了 如 何 将 适 应 性 军 事 战 略 和 行 动 与 更 可 持 续 的 解 决 方 案 相 结 合 。 
 该 章 提 出 通 过 转 向 合 作 、 开 放 式 创 新 和 生 态 系 统 思 维 ， 解 决 将 可 再 生 能 源 技 术 融 入 荷 兰 陆 军 的 技 术 、 后 勤 和 作 战 方 面 的 问 题 。 
 第 1 4 章 讨 论 了 荷 兰 皇 家 海 军 的 能 源 转 型 问 题 。 
 它 对 向 替 代 能 源 载 体 和 能 源 系 统 过 渡 所 面 临 的 挑 战 和 机 遇 进 行 了 批 判 性 审 查 ， 并 提 出 了 未 来 海 军 舰 队 所 需 的 研 发 方 向 ， 该 舰 队 可 在 不 使 用 化 石 燃 料 的 情 况 下 独 立 运 行 ， 并 将 排 放 和 特 征 降 至 最 低 。 
 第 1 5 章 提 出 通 过 应 用 直 升 机 编 队 飞 行 提 高 任 务 效 率 。 
 这 项 工 作 展 示 了 操 作 改 进 ， 并 通 过 一 个 新 的 数 学 模 型 确 定 了 节 省 约 1 0 % 燃 料 的 潜 力 。 
 最 后 ， 第 1 6 章 回 顾 了 太 阳 能 地 球 工 程 这 一 潜 在 的 全 球 变 暖 减 缓 技 术 如 何 对 气 候 安 全 、 合 作 和 国 家 主 权 构 成 威 胁 。 
 总 之 ， 本 章 调 查 了 能 源 转 型 对 陆 军 、 海 军 和 空 军 的 影 响 ， 并 对 太 阳 能 地 球 工 程 作 为 一 种 潜 在 的 新 地 缘 政 治 威 胁 进 行 了 分 析 ， 从 而 促 进 军 队 可 以 为 减 缓 气 候 变 化 和 军 事 行 动 对 环 境 的 影 响 做 出 贡 献 。 
 成 为 V I P 会 员 查 看 完 整 内 容 原 文 点 赞 并 收 藏 1 6 暂 时 没 有 读 者 2 6 权 益 说 明 本 文 档 仅 做 收 录 索 引 使 用 ， 若 发 现 您 的 权 益 受 到 侵 害 ， 请 立 即 联 系 客 服 ( 微 信 : z h u a n z h i 0 2 ， 邮 箱 ： b d @ z h u a n z h i . a i ） ， 我 们 会 尽 快 为 您 处 理 登 陆 后 查 看 更 多 精 品 内 容 热 门 V I P 内 容 开 通 专 知 V I P 会 员 享 更 多 权 益 服 务 脑 机 接 口 技 术 和 应 用 【 经 典 书 】 《 图 论 中 的 概 率 （ 第 二 版 ） 》 ， 2 7 5 页 p d f 【 A A A I 2 0 2 5 】 通 过 多 模 态 思 维 链 得 分 协 作 增 强 多 机 器 人 语 义 导 航 重 磅 ！ 人 形 机 器 人 产 业 发 展 研 究 报 告 （ 2 0 2 4 年 ） V I P 会 员 自 助 开 通 ( 推 荐 ) 客 服 开 通 详 情 本 周 荟 萃 主 题 区 块 链 区 块 链 （ B l o c k c h a i n ） 是 由 节 点 参 与 的 分 布 式 数 据 库 系 统 ， 它 的 特 点 是 不 可 更 改 ， 不 可 伪 造 ， 也 可 以 将 其 理 解 为 账 簿 系 统 ( l e d g e r ) 。 
 它 是 比 特 币 的 一 个 重 要 概 念 ， 完 整 比 特 币 区 块 链 的 副 本 ， 记 录 了 其 代 币 （ t o k e n ） 的 每 一 笔 交 易 。 
 通 过 这 些 信 息 ， 我 们 可 以 找 到 每 一 个 地 址 ， 在 历 史 上 任 何 一 点 所 拥 有 的 价 值 。 
 深 度 学 习 机 器 学 习 的 一 个 分 支 ， 它 基 于 试 图 使 用 包 含 复 杂 结 构 或 由 多 重 非 线 性 变 换 构 成 的 多 个 处 理 层 对 数 据 进 行 高 层 抽 象 的 一 系 列 算 法 。 
 机 器 学 习 “ 机 器 学 习 是 近 2 0 多 年 兴 起 的 一 门 多 领 域 交 叉 学 科 ， 涉 及 概 率 论 、 统 计 学 、 逼 近 论 、 凸 分 析 、 算 法 复 杂 度 理 论 等 多 门 学 科 。 
 机 器 学 习 理 论 主 要 是 设 计 和 分 析 一 些 让 可 以 自 动 “ 学 习 ” 的 算 法 。 
 机 器 学 习 算 法 是 一 类 从 数 据 中 自 动 分 析 获 得 规 律 ， 并 利 用 规 律 对 未 知 数 据 进 行 预 测 的 算 法 。 
 因 为 学 习 算 法 中 涉 及 了 大 量 的 统 计 学 理 论 ， 机 器 学 习 与 统 计 推 断 学 联 系 尤 为 密 切 ， 也 被 称 为 统 计 学 习 理 论 。 
 算 法 设 计 方 面 ， 机 器 学 习 理 论 关 注 可 以 实 现 的 ， 行 之 有 效 的 学 习 算 法 。 
 很 多 推 论 问 题 属 于 无 程 序 可 循 难 度 ， 所 以 部 分 的 机 器 学 习 研 究 是 开 发 容 易 处 理 的 近 似 算 法 。 
 ” — — 中 文 维 基 百 科 强 化 学 习 强 化 学 习 （ R L ） 是 机 器 学 习 的 一 个 领 域 ， 与 软 件 代 理 应 如 何 在 环 境 中 采 取 行 动 以 最 大 化 累 积 奖 励 的 概 念 有 关 。 
 除 了 监 督 学 习 和 非 监 督 学 习 外 ， 强 化 学 习 是 三 种 基 本 的 机 器 学 习 范 式 之 一 。 
 强 化 学 习 与 监 督 学 习 的 不 同 之 处 在 于 ， 不 需 要 呈 现 带 标 签 的 输 入 / 输 出 对 ， 也 不 需 要 显 式 纠 正 次 优 动 作 。 
 相 反 ， 重 点 是 在 探 索 （ 未 知 领 域 ） 和 利 用 （ 当 前 知 识 ） 之 间 找 到 平 衡 。 
 该 环 境 通 常 以 马 尔 可 夫 决 策 过 程 （ M D P ） 的 形 式 陈 述 ， 因 为 针 对 这 种 情 况 的 许 多 强 化 学 习 算 法 都 使 用 动 态 编 程 技 术 。 
 经 典 动 态 规 划 方 法 和 强 化 学 习 算 法 之 间 的 主 要 区 别 在 于 ， 后 者 不 假 设 M D P 的 确 切 数 学 模 型 ， 并 且 针 对 无 法 采 用 精 确 方 法 的 大 型 M D P 。 
 推 荐 系 统 推 荐 系 统 ， 是 指 根 据 用 户 的 习 惯 、 偏 好 或 兴 趣 ， 从 不 断 到 来 的 大 规 模 信 息 中 识 别 满 足 用 户 兴 趣 的 信 息 的 过 程 。 
 推 荐 推 荐 任 务 中 的 信 息 往 往 称 为 物 品 ( I t e m ) 。 
 根 据 具 体 应 用 背 景 的 不 同 ， 这 些 物 品 可 以 是 新 闻 、 电 影 、 音 乐 、 广 告 、 商 品 等 各 种 对 象 。 
 推 荐 系 统 利 用 电 子 商 务 网 站 向 客 户 提 供 商 品 信 息 和 建 议 ， 帮 助 用 户 决 定 应 该 购 买 什 么 产 品 ， 模 拟 销 售 人 员 帮 助 客 户 完 成 购 买 过 程 。 
 个 性 化 推 荐 是 根 据 用 户 的 兴 趣 特 点 和 购 买 行 为 ， 向 用 户 推 荐 用 户 感 兴 趣 的 信 息 和 商 品 。 
 随 着 电 子 商 务 规 模 的 不 断 扩 大 ， 商 品 个 数 和 种 类 快 速 增 长 ， 顾 客 需 要 花 费 大 量 的 时 间 才 能 找 到 自 己 想 买 的 商 品 。 
 这 种 浏 览 大 量 无 关 的 信 息 和 产 品 过 程 无 疑 会 使 淹 没 在 信 息 过 载 问 题 中 的 消 费 者 不 断 流 失 。 
 为 了 解 决 这 些 问 题 ， 个 性 化 推 荐 系 统 应 运 而 生 。 
 个 性 化 推 荐 系 统 是 建 立 在 海 量 数 据 挖 掘 基 础 上 的 一 种 高 级 商 务 智 能 平 台 ， 以 帮 助 电 子 商 务 网 站 为 其 顾 客 购 物 提 供 完 全 个 性 化 的 决 策 支 持 和 信 息 服 务 。 
 卷 积 神 经 网 络 在 深 度 学 习 中 ， 卷 积 神 经 网 络 （ C N N 或 C o n v N e t ） 是 一 类 深 度 神 经 网 络 ， 最 常 用 于 分 析 视 觉 图 像 。 
 基 于 它 们 的 共 享 权 重 架 构 和 平 移 不 变 性 特 征 ， 它 们 也 被 称 为 位 移 不 变 或 空 间 不 变 的 人 工 神 经 网 络 （ S I A N N ） 。 
 它 们 在 图 像 和 视 频 识 别 ， 推 荐 系 统 ， 图 像 分 类 ， 医 学 图 像 分 析 ， 自 然 语 言 处 理 ， 和 财 务 时 间 序 列 中 都 有 应 用 。 
 计 算 机 网 络 计 算 机 网 络 ( C o m p u t e r N e t w o r k s ) 指 将 地 理 位 置 不 同 的 多 台 计 算 机 及 其 外 部 设 备 ， 通 过 通 信 线 路 连 接 起 来 ， 在 网 络 操 作 系 统 及 网 络 通 信 协 议 的 管 理 和 协 调 下 ， 实 现 资 源 共 享 和 信 息 传 递 的 计 算 机 系 统 。 
 命 名 实 体 识 别 命 名 实 体 识 别 （ N E R ） （ 也 称 为 实 体 标 识 ， 实 体 组 块 和 实 体 提 取 ） 是 信 息 抽 取 的 子 任 务 ， 旨 在 将 非 结 构 化 文 本 中 提 到 的 命 名 实 体 定 位 和 分 类 为 预 定 义 类 别 ， 例 如 人 员 姓 名 、 地 名 、 机 构 名 、 专 有 名 词 等 。 
 机 器 翻 译 机 器 翻 译 ， 又 称 为 自 动 翻 译 ， 是 利 用 计 算 机 将 一 种 自 然 语 言 ( 源 语 言 ) 转 换 为 另 一 种 自 然 语 言 ( 目 标 语 言 ) 的 过 程 。 
 它 是 计 算 语 言 学 的 一 个 分 支 ， 是 人 工 智 能 的 终 极 目 标 之 一 ， 具 有 重 要 的 科 学 研 究 价 值 。 
 计 算 机 视 觉 计 算 机 视 觉 是 一 门 研 究 如 何 使 机 器 “ 看 ” 的 科 学 ， 更 进 一 步 的 说 ， 就 是 是 指 用 摄 影 机 和 电 脑 代 替 人 眼 对 目 标 进 行 识 别 、 跟 踪 和 测 量 等 机 器 视 觉 ， 并 进 一 步 做 图 形 处 理 ， 使 电 脑 处 理 成 为 更 适 合 人 眼 观 察 或 传 送 给 仪 器 检 测 的 图 像 。 
 作 为 一 个 科 学 学 科 ， 计 算 机 视 觉 研 究 相 关 的 理 论 和 技 术 ， 试 图 建 立 能 够 从 图 像 或 者 多 维 数 据 中 获 取 ‘ 信 息 ’ 的 人 工 智 能 系 统 。 
 关 注 我 们 专 知 指 南 · 建 议 反 馈 · 关 于 我 们 · 加 入 专 知 专 知 协 议 · 联 系 我 们 · © 2 0 1 9 专 知 滇 I C P 备 1 7 0 0 5 4 6 6 号 版 权 所 有 © 2 0 1 7 2 0 1 9 公 司 官 网 ： h t t p s : / / w w w . z h u a n z h i . a i     联 系 邮 箱 ： b d @ z h u a n z h i . a i 提 示 成 为 V I P 微 信 扫 码 咨 询 专 知 V I P 会 员 与 技 术 项 目 合 作 （ 加 微 信 请 备 注 : 专 知 ） 微 信 扫 码 咨 询 专 知 V I P 会 员 T o p
发表评论
站点推荐
中企防伪
中企防伪公司专注防伪溯源行业近20年,是集防伪标签印刷,一物一码营销,红包促销,大数据分析,产品追溯系统,防窜货系统开发,及在线赋码设备研发为一体的集成服务商,服务品牌数千家,拥有覆盖全行业的解决方案,咨询热线:13366888315.
江苏南方天宏通信科技有限公司
江苏南方天宏通信科技有限公司是一家集光缆研发、制造、销售、贸易及通信工程设计、施工为一体的跨地区、多元化经营企业，是国内最早涉及光缆制造的企业之一，具有较高的企业知名度。联系电话:0514-8788118887883366,地址:扬州市开发区东风河东路86号
苏州北斗星大药房有限公司
手持终端
深圳市成为信息股份有限公司是行业领先的智能终端产品及解决方案提供商，产品线涵盖手持终端/手持机、RFID读写器，工业平板、智能车载终端等，客户遍布全球150多个国家和地区，具体产品包括安卓PDA/手持终端、RFID手持机/固定式/穿戴式读写器、工业PDA、盘点机等，功能包括条码、超高频、NFC、指纹、虹膜、红外等，涉及物流、仓储、电力、连锁、医疗、制造等多个行业。
高品质开源商城系统
CRMEB开源商城系统，围绕新零售、品牌连锁、商家入驻等多种商业模式，自主研发B2C商城系统、B2B2C多商户商城系统、连锁多门店商城系统、跨境电商系统等；应用于直播电商、社交新零售、商家入驻等多种应用场景，系统支持多语言、多端登录，代码开源、独立部署、永久免费升级。咨询：400-8888-794
♪(^∇^*)欢迎光临！
小狐仙：作诗，有诗意地描写。这是我的个人网站，我的生活倒影，有诗意地记录自己的生活。它是一个SpringBoot+Vue2+Vue3的产物。
普立尔
微循环,微循环护理垫,微循环垫单,护理垫,纸尿裤,卫生巾,拉拉库,经期库,甘奇舒,妙悦舒,植物饮品,燕窝,无纺布,纺粘,纺镕,镕喷,复合,印花,SMS,SMMMS,SSMMS
安徽华旭建材有限公司
铜棠有礼
铜棠有礼专注服务于企业客户,主营IP定制产品、节日福利礼盒、日常营销礼品、非遗文化创意设计等,提供全案定制;拥有丰富的定制礼品产品线,完善的服务流程,强大的供应链体系,年轻高效的服务团队,创意满满的设计大咖
武汉货运公司,武汉物流公司
正广通物流是一家从事武汉到全国的陆运、空运、海运物流服务的武汉物流公司。正广通物流公司以快捷、准时、安全、优惠的服务宗旨为广大客户服务！
李姓宝宝取名
名易网用于分享李姓宝宝取名，张姓宝宝名字打分以及百家姓名测试的相关知识和技巧。
真空上料机
天津市飞云粉体设备有限公司是专业的真空上料机,真空加料机,自动上料机,投料站,包装机加料,吸料机,粉体称重,天津真空上料机供应商，主营产品有：真空上料机,真空加料机,自动上料机,投料站,包装机加料,吸料机,粉体称重,天津真空上料机等,天津市飞云粉体设备有限公司不仅具有专业的技术水平，更有良好的售后服务和优质的解决方案,欢迎来电洽谈
成都鱼缸定做
四川兰蒂斯水族用品有限公司专注于：鱼缸定做，海鲜池，观赏鱼缸设计生产销售！