| 作者 |
| 李崇 邱美康 迪特玛 P. F.莫勒 |
| 丛书名 |
| 计算机科学丛书 |
| 出版社 |
| 机械工业出版社 |
| ISBN |
| 9782103111616 |
| 简要 |
| 简介 |
| 内容简介书籍计算机书籍 ---------------------------8078731 - 信息物理系统强化学习：网络安全示例--------------------------- 本书研究的灵感来自于近期的强化学习(RL)和信息物理系统(CPS)领域的发展。RL植根于行为心理学，是机器学习的主要分支之一。不同于其他机器学习算法（如监督学习和非监督学习），RL的关键特征是其独特的学习范式，即试错。与深度神经网络相结合，深度RL变得如此强大，以至于许多复杂的系统可以被人工智能智能体在超人的水平上自动管理。另一方面，CPS被设想在不久的将来给我们的社会带来革命性的变化。这些例子包括新兴的智能建筑、智能交通和电网。 ---------------------------7536041 - 信息物理系统计算基础：概念、设计方法和应用--------------------------- 本书从基本概念、设计方法和应用实例三个方面入手，系统全面地介绍了嵌入式系统、信息物理系统、物联网、普适计算等方面的基础知识和基本原理，并介绍了信息物联网融合系统在数字制造/工业4.0方面的应用场景和社会影响。本书既可以作为相关专业高年级本科生和研究生的教材，也适用于相关领域的学者和工业界人士。 |
| 目录 |
| [套装书具体书目] 7536041 - 信息物理系统计算基础：概念、设计方法和应用 - 9787111591450 - 机械工业出版社 - 定价 99 8078731 - 信息物理系统强化学习：网络安全示例 - 9787111676478 - 机械工业出版社 - 定价 79 ---------------------------8078731 - 信息物理系统强化学习：网络安全示例--------------------------- 出版者的话 译者序 前言 作者简介 第一部分 介绍 第1章 强化学习概述 2 1.1 强化学习综述 2 1.1.1 引言 2 1.1.2 与其他机器学习方法的比较 4 1.1.3 强化学习示例 6 1.1.4 强化学习应用 7 1.2 强化学习的发展历史 9 1.2.1 传统的强化学习 9 1.2.2 深度强化学习 11 1.3 强化学习的仿真工具 12 1.4 本章小结 13 第2章 信息物理系统和网络安全概述 14 2.1 引言 14 2.2 信息物理系统研究示例 16 2.2.1 资源分配 16 2.2.2 数据传输与管理 18 2.2.3 能源控制 18 2.2.4 基于模型的软件设计 19 2.3 网络安全威胁 20 2.3.1 网络安全的对手 20 2.3.2 网络安全的目标 21 2.4 本章小结 26 2.5 练习 26 第二部分 强化学习在信息物理系统中的应用 第3章 强化学习问题 30 3.1 多臂赌博机问题 30 3.1.1 ε-greedy算法 33 3.1.2 softmax算法 35 3.1.3 UCB算法 36 3.2 上下文赌博机问题 37 3.3 完整的强化学习问题 39 3.3.1 强化学习的要素 40 3.3.2 马尔可夫决策过程介绍 41 3.3.3 值函数 42 3.4 本章小结 45 3.5 练习 45 第4章 基于模型的强化学习 49 4.1 引言 49 4.2 动态规划 51 4.2.1 策略迭代法 52 4.2.2 价值迭代法 55 4.2.3 异步动态规划 56 4.3 部分可观察马尔可夫决策过程 58 4.4 连续马尔可夫决策过程 61 4.4.1 惰性近似 61 4.4.2 函数近似 62 4.5 本章小结 63 4.6 练习 64 第5章 无模型强化学习 66 5.1 引言 66 5.2 强化学习预测 66 5.2.1 蒙特卡罗学习 66 5.2.2 时序差分学习 69 5.3 强化学习控制 71 5.3.1 蒙特卡罗控制 71 5.3.2 基于时序差分的控制 72 5.3.3 策略梯度 77 5.3.4 actor-critic 81 5.4 高级算法 84 5.4.1 期望Sarsa 84 5.4.2 双Q-learning 85 5.5 本章小结 85 5.6 练习 86 第6章 深度强化学习 90 6.1 引言 90 6.2 深度神经网络 90 6.2.1 卷积神经网络 92 6.2.2 循环神经网络 94 6.3 深度学习在值函数上的应用 95 6.4 深度学习在策略函数上的应用 100 6.4.1 DDPG 102 6.4.2 A3C 104 6.5 深度学习在强化学习模型上的应用 107 6.6 深度强化学习计算效率 108 6.7 本章小结 109 6.8 练习 109 第三部分 案例研究 第7章 强化学习与网络安全 112 7.1 传统的网络安全方法 112 7.1.1 传统的网络安全技术 112 7.1.2 新兴网络安全威胁 113 7.2 强化学习在网络安全中的应用 114 7.2.1 移动群智感知中的虚假感知攻击 114 7.2.2 认知无线电网络中的安全强化 115 7.2.3 移动边缘计算中的安全问题 117 7.2.4 网络安全分析师的动态调度 118 7.3 本章小结 119 7.4 练习 119 第8章 案例研究：智能电网中的在线网络攻击检测 120 8.1 引言 120 8.2 系统模型和状态估计 122 8.2.1 系统模型 122 8.2.2 状态估计 123 8.3 问题描述 124 8.4 解决方案 127 8.5 仿真结果 130 8.5.1 仿真设计与参数设置 130 8.5.2 性能评估 130 8.6 本章小结 134 第9章 案例研究：击败中间人攻击 135 9.1 引言 135 9.2 强化学习方法 137 9.2.1 状态空间 137 9.2.2 行动空间 139 9.2.3 奖励 139 9.3 实验和结果 139 9.3.1 模型训练 140 9.3.2 在线实验 141 9.4 讨论 143 9.4.1 基于探测器的检测系统 143 9.4.2 运用SDN/OpenFlow使模型实用 144 9.5 本章小结 144 参考文献 145 索引 161 ---------------------------7536041 - 信息物理系统计算基础：概念、设计方法和应用--------------------------- 出版者的话 译者序 序言 前言 第1章系统概述 1.1系统研究 1.2标准的系统描述形式 1.2.1输入输出描述 1.2.2状态变量描述 1.3可控性、可观测性和可识别性 1.4线性系统模型的分析方案 1.4.1使用拉普拉斯变换的状态方程的解 1.4.2线性向量方程组的特征值 1.5系统稳态误差 1.6系统稳定性分析案例研究 1.7练习 参考文献 第2章嵌入式计算系统概述 2.1嵌入式计算系统 2.2嵌入式计算系统的硬件架构 2.2.1可编程逻辑器件 2.2.2可编程门阵列 2.3设计指标 2.4嵌入式控制系统 2.4.1控制 2.4.2反馈控制 2.4.3嵌入式控制系统的反馈组件 2.5软硬件协同设计 2.6案例研究：基于FPGA的CPU内核 2.7练习 参考文献 第3章信息物理系统概述 3.1信息物理系统 3.2信息物理系统设计建议 3.3信息物理系统需求 3.3.1需求工程 3.3.2互操作性 3.3.3实时系统 3.3.4GPU计算 3.4信息物理系统应用 3.4.1通信 3.4.2消费者交互 3.4.3能源 3.4.4基础设施 3.4.5健康保障 3.4.6制造 3.4.7军事 3.4.8机器人 3.4.9交通 3.5智慧城市和万联网 3.6案例研究：信息物理车辆跟踪系统 3.6.1车辆跟踪系统 3.6.2基于RFID的车辆跟踪系统 3.6.3需求分析 3.6.4进一步的研究 3.7练习 参考文献 第4章物联网概述 4.1物联网 4.2射频识别技术 4.3无线传感器网络技术 4.3.1传感器技术 4.3.2传感器网络 4.3.3无线传感器网络 4.4电力线通信 4.4.1物联网和电力线通信 4.4.2智能电网 4.4.3智能家居能源管理 4.5RFID应用 4.6案例研究：行李跟踪系统 4.7练习 参考文献 第5章普适计算 5.1普适计算发展史 5.2普适计算基础 5.2.1在普适空间中学习 5.2.2智能家居和电力线通信 5.2.3普适计算的核心特性 5.2.4普适计算形式化用例 5.3智能设备：组件和服务 5.4标记、传感和控制 5.4.1标记 5.4.2传感 5.4.3控制 5.5普适计算中的自治系统 5.6案例研究：机器人操纵器 5.7练习 参考文献 第6章系统和软件工程 6.1系统工程简介 6.1.1系统工程标准ISO/IEC 15288 6.1.2自顶向下的系统工程方法 6.1.3开放式机电一体化自动化工程平台 6.2信息物理系统中的设计挑战 6.2.1使用Cradle的需求定义和管理 6.2.2需求定义与管理活动 6.2.3INCOSE系统工程手册 （3.2.2版本）可追溯性 6.3软件工程简介 6.3.1V模型 6.3.2敏捷软件开发方法 6.3.3V模型与敏捷软件开发方法的比较 6.4信息物理系统软件设计需求 6.5海域案例研究 6.5.1在港口和船舶上跟踪和监测集装箱 6.5.2跟踪和监测从海港运输到无水港的集装箱 6.6练习 参考文献 第7章数字制造和工业4.0 7.1制造业简介 7.1.1智能和敏捷制造 7.1.2智能工厂 7.1.3工业 4.0 7.2个性化生产 7.3网络制造一体化工业 7.4开放式和封闭式生产线 7.5数字制造/工业4.0的信息安全 7.6数字制造/工业4.0案例研究 7.6.1汉诺威中心的生产工程（PZH）方法 7.6.2钢铁行业的方法 7.6.3博世软件创新方法 7.6.4保险业务方法 7.6.5德国工业4.0工作组方法 7.6.6美国数字制造与创新设计研究所方法 7.7练习 参考文献 第8章未来社会生活中的影响 8.1简介 8.2经济、社会和组织方面的挑战 8.3在工作中改变需求 8.4产品个性化和全球影响力的变化因素 8.5练习 参考文献 术语表 索引 |