weixin_43742643的博客

最近需要用到 PCA 和 t-SNE 降维技术，把 110 维的状态降到 2 维，用 matplotlib 可视化。由于数据量比较大，加上 t-SNE 运行速度慢，所以先用 PCA 降到 50 维，再用 t-SNE 降到 2 维from sklearn.decomposition import PCAfrom sklearn.manifold import TSNE# dataset_S.shape=(30000, 110)pca = PCA(n_components=50)pca.fit(d

matplotlibcolors 那里做了一下处理，使越大的值对应的颜色越深。除了 viridis 这种渐进色，还有很多其他的，详见官方文档import matplotlib.pyplot as pltimport matplotlib.patches as mpatchesimport matplotlib.cm as cmfrom matplotlib.colors import Normalizefig = plt.figure(figsize=(6.4*2, 4.8*1.1))ax

3D 画图，只能使用 add_subplotimport matplotlib.pyplot as pltfig = plt.figure(figsize=(6.4*3, 4.8*1.1))ax2d = fig.add_subplot(1, 3, 1)ax2d.scatter(S_2d[:, 0], S_2d[:, 1], s=1)ax2d.set_title('State distribution')ax2d.set_xlabel('State[0]')ax2d.set_ylabel('

Trust Region Policy Optimizationhttps://arxiv.org/pdf/1502.05477.pdf有保证的单调递增策略梯度指出问题没啥问题，直接提出单调递增策略梯度理论证明(S,A,P,r,ρ0,γ)(\mathcal{S}, \mathcal{A}, P, r, \rho_0, \gamma)(S,A,P,r,ρ0​,γ) ρ0\rho_0ρ0​ : 初始状态 s0s_0s0​ 的分布 那么期望折扣回报可以表示为η(π)=Es0,a0,…[∑t=0∞

具体问题：https://unix.stackexchange.com/questions/20878/tmux-not-scaling-to-fill-the-window我使用 windows 登录 tmux 后，linux 上的 tmux 窗口变成下面这个样子233，怎么都调不过来…解决办法：ctrl + b 然后 shift + d

用于保存数据imoprt pickle保存with open('/data/hanjl/my_data/batch_data.pkl', 'wb') as f: pickle.dump(my_data, f)加载with open('/data/hanjl/my_data/batch_data.pkl', 'rb') as f: my_data = pickle.load(f)

Creating a Clusterminikube versionminikube startGreat! You now have a running Kubernetes cluster in your online terminal. Minikube started a virtual machine for you, and a Kubernetes cluster is now running in that VM.kubectl versionkubectl cluster-in

原贴：https://stackoverflow.com/questions/40539938/whats-the-difference-between-optimizer-compute-gradient-and-tf-gradients-in摘要：### Approach 1 ###variable_list = desired_list_of_variablesgradients = optimizer.compute_gradients(loss,var_list=variable_list

我在 ubuntu 上使用 zsh，和 tmux 一块在用。tmux 分屏后，某一个 zsh 进程的命令历史信息或者环境变量不会同步到其他 zsh 进程，如何重启 zsh 进程解决这个问题呢，直接使用 zsh 有一个问题，就是新的 zsh 进程是包裹在旧的 zsh 进程里面，这个可以用 Ctrl+D 来验证。有没有更好的办法？原文见 https://superuser.com/questions/1453514/restart-a-zsh-process-without-having-nested-ses

在 ubuntu 上，我一般使用 ~/.bashrc 存储环境变量。如下：export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/root/.mujoco/mujoco210/bin现在才知道这种方式有一个缺点，每次执行 source ~/bashrc 后，会导致 LD_LIBRARY_PATH 的值出现重复的 /root/.mujoco/mujoco210/bin。虽然没啥大影响，但是强迫症受不了…详情见 https://unix.stackexchange.com/qu

我在 docker 中使用 ohmyzsh，docker 是 ubuntu18.04，我想通过 omz update 来更新 zsh，但是出现了一下错误gnutls_handshake() failed: The TLS connection was non-properly terminated.奇怪的是，我在 ~/.ohmyzsh 目录下，使用 git pull origin master 是可以的。========================于是在把错误信息去 google 上搜，第一个

首先看这个 https://stackoverflow.com/questions/36462962/loss-clipping-in-tensor-flow-on-deepminds-dqnDQN 文章中提到的 clip 并不是 梯度 clip。首先看一下 tensorflow 1 中的 huber_loss，令 d = 1。 0.5 * x^2 if |x| <= d 0.5 * d^2 + d * (|x| - d) if |x| > d

建议看原文https://stackoverflow.com/questions/33974681/how-can-i-convert-tabs-to-spaces-and-vice-versa-in-an-existing-fileF1F1,indentationToSpaces or indentationToTabs (depending on your need)Enter.replacePress CTRL + FClick the .* button to search u

必备Remote-SSHPythonC/C++markdown 相关markdownlintmarkdown all in one可选Indent one spacevscode-pdf

vscode 安装了 pylance 插件，可以检查代码规范，然而经常会在 python 文件首部自动添加 import。就像下面这样，啥呀这是…解决办法 https://github.com/microsoft/pylance-release/issues/64打开设置，搜索 autoImportCompletions把勾去掉就行了...

tf.keras参考 https://github.com/tensorflow/docs/blob/529ba4346b8fc5e830e762a2f0ee87b3c345c0c9/site/en/r1/guide/keras.ipynb# Save weights to a TensorFlow Checkpoint filemodel.save_weights('./weights/my_model')# Restore the model's state,# this requires

首先在 166 上 build 镜像，保存为 framework.tardocker save [tag] > framework.tar然后，从 99 上下载 framework.tarscp hanjl@166:~/framework.tar ./docker load < framework.tardocker tag [tag] by:5000/hanjl/frameworkdocker push by:5000/hanjl/framework提交任务command

普通echo "hello">>> hello转义字符echo "$LD_LIBRARY_PATH">>> /usr/local/nvidia/lib:/usr/local/nvidia/lib64:/root/.mujoco/mujoco210/binecho "\$LD_LIBRARY_PATH">>> /usr/local/nvidia/lib:/usr/local/nvidia/lib64:/root/.mujoco/mujoc

在 docker 中画图时，使用 color 结果显示ImportError: No module named 'Tkinter'需要安装apt updateapt install python3.7-tk

？镜像明明早就 build 好了，怎么出问题了？python -c 'import mujoco_py'会失败，然后还要安装个apt install libgrew-dev什么鬼？