NEAT 神经网络 JavaScript

Question

我开始学习一些关于神经网络的知识，我想创建一个学习玩俄罗斯方块的神经网络。

所以我偶然发现了NEAT JS Library 并将其与 nodejs 中的控制台俄罗斯方块游戏连接起来。 我担心的是出了点问题，因为无论屏幕上已经有多少瓷砖，网络都会不断地捣碎一个按钮。不确定我是否写了一个不正确的健身功能或我的教练正在放弃我最好的基因组。因为当网络通过加速瓦片向下获得一些分数时，这种行为在下一代中消失了。

我们非常感谢您的帮助 :-) 如果您想看看，请查看repo

要运行它，只需 cd 进入目录并使用 node.js 运行 index.js

提前感谢大家！

Answer 1

你可以尝试一些事情......

1. 测试您的评分功能是否正确。尝试改变它来奖励一些愚蠢的事情，比如在最左边放置块。如果您得到预期的行为，您可能可以轻松更改函数以适应您的问题。如果结果与您的预期相反，您可能会告诉算法有关 错误 而不是分数，因此在返回之前将该值乘以 -1。
2. 跟踪每一代的平均分数，看看他们是否会随着时间的推移变得更好。如果是，一切都很好，但您可能需要更多的培训时间。如果不是算法中有问题。
3. 检查您的进化参数。您应该拥有尽可能多的人口以确保多样性。最低应该是200左右。使用最优秀的 10% 人口进行繁殖。每个复制的基因组都应该有很小（大约 3%）的机会发生突变。