《深度强化学习实战》第六，七章读书摘要

ddllxxrr · 发表于2023-11-16 06:22

《深度强化学习实战》第六，七章读书摘要 [复制链接]

6 可替代的优化方法：进化算法

神经网络的灵感来源于真实的生物大脑，卷积神经网络也受到了视觉生物机制的启发。

图1，2

6.4 进化算法的优缺点

1，进化算法探索更多，无梯度算法的一个优势是，它们比基于梯度算法探索得更多。

2，时化算法令人难以置信的样本密集性

主要说收集数据量大，成本高

又说可以通过模拟器来减少成本。

6.5 进化算法是一个针对各种各样算法的总称，这些算法从生物进化中获得灵感，

如果有多台机器可供使用，就可以并行确定每个智能体在各自机器上的适应性。在开始评估下一个智能体之前，不必等当前智能体完成在整个环境中的运行。

图3

分布式Q-learning对Q-learning进行扩展，使其不仅要确定动作-价值的点估计，还要确定每个动作的动作-价值的完整分布。

从这两章，我看出来了一点体会。就是西方的理论是往微观世界发展的，比如现在的算法完全模拟生物的距阵。本中的达尔文的生物进化理论。我是不赞同的。

因为他自己都没有搞明白，为什么特种一下子突然出现了那么多品种。猴子进化出人，再给它上亿年也是不行的。这种理论用在人工智能也许行。但其理论基础我不认为是对的。

lugl4313820 · 发表于2023-11-16 10:25

其实要是把中国的周易，弄成算法，那不是比这些更加牛，可以看到未来！

chejm · 发表于2023-11-16 17:21

顶起来，为楼主的持续分享点赞，希望楼主再接再厉，持续分享新内容

dirty · 发表于2023-11-18 20:34

lugl4313820 发表于 2023-11-16 10:25 其实要是把中国的周易，弄成算法，那不是比这些更加牛，可以看到未来！

想法不错