ML2.2.2 PG 之 AC 方法思路和实践
1. 资料 PG 方法基础思路：https://pangruitao.com/post/5164 PG 最基础 … 阅读更多
折腾记录
ML2.2.1 PG 之 REINFORCE 方法思路和实践
1. 资料 PG 方法核心思路：https://pangruitao.com/post/5164 2. REI … 阅读更多
ML2.2 策略梯度PG的学习和实践
1. 资料 2. 策略梯度PG思路说明 PG 即策略梯度方法（Policy Gradient Methods） … 阅读更多
ML2.1 DQL 学习和实践
1. 资料 2. Q Learning 的思路 强化学习的目标是：获得一个智能体 Agent ，当把环境信息告 … 阅读更多
ML1.6 实现 GPT 并结合 Tokenizer
1. 说明 完整路径 2. Jupyter Notebook gpt_with_tokenizer In [1 … 阅读更多
ML1.5 实现 GPT 的 tokenizer
1. 说明 跟 Andrej 大佬学 GPT Tokenizer 2. Jupyter Notebook to … 阅读更多
ML1.4 pytorch 实现极简版 GPT
1. 说明 跟 Andrej 大佬的教程实现的极简版 GPT，可以实现续写文章（最后有运行效果）。 2. Ju … 阅读更多
ML1.3 self-attention 的基础数学思路
1. 说明 GPT 模型学习的一步 根据 Andrej Karpathy 大佬的课程视频实践得到 2. Jup … 阅读更多
ML1.1 pytorch 实现简单的全连接神经网络
Jupyter Notebook simple_fcnn In [7]: import torch impor … 阅读更多
Windows 11 安装 OpenSSH Server
1. 记录 用管理员身份打开 powershell 安装 OpenSSH Server 设置 OpenSSH … 阅读更多
Windows 下部署 CUDA 和 pytorch 环境
0. 说明 注意，安装时需要查一下最新的 pytorch 支持的 CUDA 版本 省事的话可以用个人已经验证可 … 阅读更多
使用 python 暴力破解 zip 密码
1. 说明 让python去一个个尝试我们设定的密码字符集的排列组合，直到试出来密码。 我设定是每一千次尝试会 … 阅读更多
Nginx 配合 acme.sh 申请 ssl 证书并部署和自动续期
1. 说明 acme.sh 可以方便地快速申请免费 SSL 证书，并且定期自动更新。是非常好用的工具。 我曾经 … 阅读更多
Linux 下 Github 基本操作
1. 安装并启用 SSH 1.1 安装 1.2 配置 一些重要配置 1.3 重启SSH 2. 密钥生成和配置 … 阅读更多
python飞书机器人拉群聊历史消息
1. 参考代码 1. 说明 1.1 效果 正常运行状态如下 1.2 准备 需要创建飞书应用，并添加机器人 ht … 阅读更多
Windows下Github基本操作
1. ssh安装和配置 用 ssh 操作是比较方便的，而且安全性也很成熟靠谱。 1.1 安装 openSSH … 阅读更多