整理记录 – 第 2 页

ML2.2.2 PG 之 PPO 算法思路和实践

2025年3月1日2024年11月24日作者 PP

1. 资料 PG 方法核心思路：https://pangruitao.com/post/5164 2. PPO … 阅读更多

ML2.2.2 PG 之 AC 方法思路和实践

2025年3月1日2024年11月11日作者 PP

1. 资料 PG 方法基础思路：https://pangruitao.com/post/5164 PG 最基础 … 阅读更多

ML2.2.1 PG 之 REINFORCE 方法思路和实践

2025年3月1日2024年11月11日作者 PP

1. 资料 PG 方法核心思路： 2. REINFORCE 思路 REINFORCE 就基本按照 PG 的核心 … 阅读更多

ML2.2 策略梯度PG的学习和实践

2025年3月1日2024年11月9日作者 PP

1. 资料 2. 策略梯度PG思路说明 PG 即策略梯度方法（Policy Gradient Methods） … 阅读更多

ML2.1 DQL 学习和实践

2025年3月1日2024年11月5日作者 PP

1. 资料 2. Q Learning 的思路强化学习的目标是：获得一个智能体 Agent ，当把环境信息告 … 阅读更多

ML2.0 强化学习笔记汇总

2025年3月1日2024年11月5日作者 PP

1. 资料 2. 说明强化学习的目标是获得一个智能体 Agent ，当把环境信息告知 Agent 以后，Ag … 阅读更多

ML0.0 机器学习笔记汇总

2025年3月1日2024年10月28日作者 PP

0. 资料 1. 实践和实现 GPT 详见 ML 1.0 2. 强化学习详见 ML 2.0 相关文章 ML2 … 阅读更多

ML1.6 实现 GPT 并结合 Tokenizer

2025年3月1日2024年10月15日作者 PP

1. 说明完整路径 2. Jupyter Notebook gpt_with_tokenizer In [1 … 阅读更多

ML1.5 实现 GPT 的 tokenizer

2025年3月1日2024年10月15日作者 PP

1. 说明跟 Andrej 大佬学 GPT Tokenizer 2. Jupyter Notebook to … 阅读更多

ML1.4 pytorch 实现极简版 GPT

2025年3月1日2024年10月14日作者 PP

1. 说明跟 Andrej 大佬的教程实现的极简版 GPT，可以实现续写文章（最后有运行效果）。 2. Ju … 阅读更多

ML1.0 一步步学习和实现 GPT

2024年11月6日2024年10月13日作者 PP

1. 说明文章作为个人学习 GPT 的笔记。 1.1 学习资料不得不说现在的互联网还是给像我这样的普通人提 … 阅读更多

ML1.3 Self-Attention 的基础数学思路

2025年3月1日2024年10月11日作者 PP

1. 说明 GPT 模型学习的一步根据 Andrej Karpathy 大佬的课程视频实践得到 2. Jup … 阅读更多

ML1.2 pytorch 实现 bigram 模型

2024年11月6日2024年10月11日作者 PP

1. 说明参考 Andrej Karpathy 的 Let’s Build GPT 讲解视频个 … 阅读更多

ML1.1 pytorch 实现简单的全连接神经网络

2025年3月1日2024年10月10日作者 PP

Jupyter Notebook simple_fcnn In [7]: import torch impor … 阅读更多

Windows 11 安装 OpenSSH Server

2024年10月20日2024年9月26日作者 PP

1. 记录用管理员身份打开 powershell 安装 OpenSSH Server 设置 OpenSSH … 阅读更多

Windows 下部署 CUDA 和 pytorch 环境

2024年10月20日2024年9月24日作者 PP

0. 说明注意，安装时需要查一下最新的 pytorch 支持的 CUDA 版本省事的话可以用个人已经验证可 … 阅读更多

使用 python 暴力破解 zip 密码

2024年10月14日2024年9月22日作者 PP

1. 说明让python去一个个尝试我们设定的密码字符集的排列组合，直到试出来密码。我设定是每一千次尝试会 … 阅读更多

Nginx 配合 acme.sh 申请 ssl 证书并部署和自动续期

2024年10月14日2024年9月20日作者 PP

1. 说明 acme.sh 可以方便地快速申请免费 SSL 证书，并且定期自动更新。是非常好用的工具。我曾经 … 阅读更多

量子力学自学笔记

2024年11月4日2024年9月19日作者 PP

1. WHY 为什么学量子力学中有很多有趣的现象：这些无法用经典物理或者常识去解释，却又是被实验发现的现象 … 阅读更多

Python 实现年级排课和优化-说明

2024年10月14日2024年9月13日作者 PP

0. 简述 0.1 生成的课表生成班级的课表（老师名字用 teacher_X 代替，保护隐私）：生成老师的 … 阅读更多