最近线上redshift disk时不时会有一个spike的问题, 需要调查下。
第一步 先监控问题
通过如下的java代码可以获取redshift的disk当前使用率:
/*** Note this method will return the prod redshift disk usage.* * https://console.aws.amazon.com/ia…
Q-learning
1 Sarsa vs Q-learning
Sarsa 和 Q-learning 都是 TD 算法,但是解决的问题不同。
Sarsa 用于训练 动作价值函数 Q π ( s , a ) Q_{\pi(s,a)} Qπ(s,a),其 TD target 为 y t r t γ ⋅ Q π ( s t 1 , a t 1 ) y_t r_t \gamma \…