ssh反向代理连接
场景
学校的个人机器里将了虚拟机，无法在外网使用ssh连接，但是学校的服务器可连
所以通过服务器为跳板，实现在外部连自己的虚拟机
方法
- 首先在虚拟机上运行： ssh -NfR 6666:localhost:22 name@school_server
- 这时即可通过学校服务器连接到虚拟机： ssh -p 6666 name@virtual_machin
config 文件配置
前面已经学会配置了config文件了，配置见SSH Config 配置指南
2.4 Value Iteration and Policy Iteration (策略迭代与truncated iteration)
2.3 Value Iteration and Policy Iteration (值迭代)
前置知识
2.2 Optimal State Values and Bellman Optimality Equality (BoE 求解)
Value Iteration Algorithm
回忆一下BOE的形式
1 emacs_elist （基本基础）
2.2 Optimal State Values and Bellman Optimality Equality (BoE 求解)
pdf2keynote
作用
将beamer的pdf slides 生成keynote
安装
pip3 install git+https://github.com/remymuller/pdf2keynote.git
使用
2.1 Optimal State Values and Bellman Optimality Equality
1.3 State Values and Bellman Equation (Action value and Summary)
前置知识
State Values and Bellman Equation (Basic and Definition) 1 State Values and Bellman Equation (Vector form 与 求解) 2
Action Value
State Value: 从某个状态出发的average return
1.2 State Values and Bellman Equation (Vector form 与 求解)
矩阵向量形式
本节接State Values and Bellman Equation 1, 请将上节的前置知识看完再看本节
完整公式为：
这里的未知量有2个，\(v_{\pi}(s)\)和\(v_{\pi}(s’)\). 一个式子是没法求出2个未知量的，但是因为对每一个状态都有一个式子，因此可以通过联立求得每一个状态的状态值。
bootstraping
bootstrap 意思是鞋带，bootstraping原来的意思是说一个人拉自己的鞋带，想给自己拉起来，异想天开的意思，算法里面指的是可以从自己出发找到最优解的意思
1.1 State Values and Bellman Equation (Basic and Definition)
SSH Config 配置指南
原因
假如有多台服务器，hostname都很长，比如我有 9 台服务器，信息如下：
- HostName:
01.research.cs.dal.ca~09 - User:
fuckyoubitch - Port:
22
需要登录时需输入：
prompt-collection
将内容变成卡通信息
You are an illustration assistant specialized in creating hand-drawn cartoon-style infographics. Follow all rules below strictly and without deviation.
🎨 STYLE RULES（风格规则）
