随机学习与优化
2011-2
清华大学出版社
曹希仁
425
陈曦
无
随机学习与优化在现代工程、社会、金融问题中具有广泛的应用。本书以一个统一的框架，涵盖了离散事件动态系统的摄动分析、马尔可大决策过程、强化学习、辨识和自适应控制等学习和优化的不同学科；并利用基于性能差分公式的简单方法介绍马尔可夫决策过程理论，通过该方法能求得以长期平均代价为准则的n阶偏差优化策略以及无折扣的Blackwell优化策略。本书还包含有最近发展出来的基于事件的优化方法，它为利用系统的特性来克服或减轻维数灾的研究开辟了个新方向。本书强调以样本路径的构造为基础的物理解释，物理上的直观认识可以为完善已有的优化方法提供新思路。 为帮助读者理解掌握书中的内容，本书提供了大量的示例和丰富的习题。 本书适合作为相关专业的研究生教材，学生可从一门课程中学到原本属于多个不同学科的内容。本书有助于促进学习和优化领域中各学科之间的合作，对该领域的研究人员也大有裨益。
1 引言 1.1 学习和优化概述 1.1.1 问题描述 1.1.2 最优策略 1.1.3 学习和优化的基本局限 1.1.4 学习和优化的基于灵敏度的观点 1.2 不同学科中问题的描述 1.2.1 摄动分析（PA） 1.2.2 马尔可夫决策过程 1.2.3 强化学习 1.2.4 辨识和自适应控制 1.2.5 基于事件的优化和性能势集结 1.3 学习和优化学科关系图 1.4 术语和符号 习题第1部分 学习与优化的四门学科 2 摄动分析 2.1 马尔可夫链的摄动分析 2.1.1 构造摄动样本路径 2.1.2 摄动实现因子和性能势 2.1.3 性能导数公式 2.1.4 折扣报酬准则的梯度 2.1.5 高阶导数和麦克劳林级数 2.2 马尔可夫过程的性能灵敏度 2.3 半马尔可夫过程的性能灵敏度 2.3.1 半马尔可夫过程的基础知识 2.3.2 性能灵敏度公式 2.4 排队系统的摄动分析 2.4.1 构造摄动样本路径 2.4.2 摄动实现 2.4.3 性能导数 2.4.4 相关理论问题的评注 2.5 其他方法 习题 3 利用摄动分析的学习与优化 3.1 性能势 3.1.1 数值方法 3.1.2 从样本路径学习性能势 3.1.3 耦合 3.2 性能梯度 3.2.1 通过性能势估计 3.2.2 直接学习 3.3 利用摄动分析的优化 3.3.1 梯度方法和随机逼近 3.3.2 利用长样本路径的优化 3.3.3 应用 习题 4 马尔可夫决策过程 ……第2部分 基于事件的优化——一种新方法第3部分 附录：数学基础
版权页：插图：
《随机学习与优化:基于灵敏度的方法》是信息技术和电气工程学科国际知名教材之一。
无
书的纸张质量很一般，甚至有点差劲。
建议大家看英文版曹老师说他的英文版写的浅显易懂汗.............压力很大
书的质量很高，今天看了一小部分，译得不错，初初看起来好象是陈希教授一个人译的。这样一本400页的专著，才36元搞定，实惠！谢谢曹教授和陈教授！
书的质量很好，发货速度也很快，而且完全按照我的意思发的货，很好，我很满意，希望以后多从卓越多买点书！！
上学期上的曹老师的课，配合这本书，理解起来更容易一些，这本书的内容还是有点深奥的，得花些时间在上面了