DQN
DQNGoogle Deep mind 团队就是靠着这 DQN 使计算机玩电动玩得比我们还厉害 融合了神经网络和 Q learning 的方法，名字叫做 Deep Q Network。 我们可以将状态和动作当成神经网络的输入，然后经过神经网络分析后得到动作的 Q 值，这样我们就没必要在表格中记录 Q 值，而是直接使用神经网络生成 Q 值。 DQN 两大利器 DQN 有一个记忆库用于学习之前的经历
归档: 2022/12
单步更新 and 回合更新
单步更新 and 回合更新单步更新虽然我们每一步都在更新，但是在没有获取宝藏的时候，我们现在站着的这一步也没有得到任何更新，也就是直到获取宝藏时，我们才为获取到宝藏的上一步更新为：这一步很好，和获取宝藏是有关联的，而之前为了获取宝藏所走的所有步都被认为和获取宝藏没关系。 回合更新虽然我要等到这回合结束，才开始对本回合所经历的所有步都添加更新，但是这所有的步都是和宝藏有关系的，都是为了得到宝藏需要
Q Learning 和 Sarsa
Q Learning 和 Sarsa在强化学习中 Sarsa 和 Q learning 及其类似，Sarsa 是说到做到型，所以我们也叫他 on-policy，在线学习，学着自己在做的事情。而 Q learning 是说到但并不一定做到，所以它也叫作 Off-policy，离线学习。 而因为有了 maxQ，Q-learning 也是一个特别勇敢的算法。因为 Q learning 机器人 永远都会
一条命令去除 Creator 图片黑边
一条命令去除 Creator 图片黑边相关讨论链接 黑边现象是边缘像素与黑色进行插值导致，如果边缘像素和自己相近颜色插值，黑边就会自然消失 基于这个思路将最靠近图片边缘的透明像素的alpha改为3，并且将其RGB值设为邻近非透明像素RGB的插值，简称扩边。 如何安装工具使用python3编写，需读者自行安装python3环境 方法1（推荐）： 通过pip下载安装1pip install png-d
机器学习教程
机器学习教程机器学习教程链接
Win10 利用 pycharm 运行 gym 框架
Win10 利用 pycharm 运行 gym 框架在windows下运行，要借助anaconda建一个环境，在新建的环境里面配置好gym，之后在pycharm中新建一个项目，在项目中添加运行这个新建的环境，就可以在windows上运行gym了 1. 安装anaconda下载最新版Anaconda下载地址 默认安装在系统环境变量Path里面添加如下内容123F:\Anaconda3\F:\Anac
域名转移至其他阿里云账号
域名转移至其他阿里云账号前提条件 域名必须在有效期内。进行线上转移前，您需查看域名是否在有效期内，详情请参见WHOIS查询。如果域名已过期，需先为域名续费，请参见域名续费。 “.cn”域名的注册时间需大于7天，”.com”和”.net”域名的注册时间需大于1天，实际以控制台界面显示的具体提示原因为准。 域名不能处于过户中状态。如果您操作了域名过户，需等过户成功后再进行账号间转移。 阿里云普通
ICP备案信息转移至其他阿里云账号
ICP备案信息转移至其他阿里云账号注意事项 转移成功后，新账号的所有人将享有ICP备案信息的管理权限（包括但不限于备案信息修改、注销备案等），请您谨慎操作。 ICP备案信息转移过程中，不会影响您备案主体下已备案网站的正常访问。 将ICP备案信息转入其他阿里云账号时，待转入的账号需满足以下条件，否则无法成功操作备案转移。 账号下无进行中的ICP备案订单。 账号下没有其他主体的ICP备案信息。 目
跨账号过户迁移阿里云ECS实例
跨账号过户迁移阿里云ECS实例约束限制 VPC类型的ECS实例的弹性公网IP不支持过户，固定公网IP支持过户。 过户操作只涉及变更所属用户名信息。 过户一般需要半小时左右。 包年包月的ECS实例过户后，服务器时长和到期时间与原来保持一致。 部分营销活动或优惠活动购买的ECS实例不支持过户，详情以活动页面为准。 本人迁移遇到的问题 密钥对登录的云服，需要解除密钥对绑定，换成密码登录 需要停掉云服，
Anaconda安装及配置
Anaconda安装及配置下载Anaconda下载地址 安装配置环境主要有三个环境的配置: anaconda安装路径（为了Python检查正常）: 前面安装时路径一定要记清楚，之前已提醒复制，我的是F:\anaconda 安装路径\Scripts（为了conda检查正常）: 只需在上述路径中找到Scripts，然后复制路径即可，我的路径是F:\anaconda\Scripts 另一个路径（加
域名备案加急
域名备案加急比较物美价廉 4-5天 1.8k 可以淘宝购买，开对公发票，无合同 域名备案加急服务