2019年11月_da_kao_la

原创 Linux下的远程同步工具——rsync

rsync命令是Linux/MacOs下的一个同步命令，可以用于同步本地或两台机器上的文件或目录，尤其是同步目录功能，非常方便。rsync每次同步目录是只会传输源目录修改的文件到目标目录，不会每次都传整个目录过去，在同步含有数量很多的、经常变动的文件的目录时非常好用。向服务器同步本地目录的用法示例：rsync -avzP ${SRC_DIR} ${USER_NAME}@${SERVER_IP}:...

2019-11-26 00:08:44 251

原创 tensorflow: 在Estimator中使用tf.summary把变量序列化到日志供tensorboard读取

tensorflow版本：1.11.0最近在改bert的代码，想要通过tensorboard查看修改后的bert模型训练过程中的参数变化。bert的代码用的是Estimator结构写的，Estimator是tensorflow的一个高阶API（一个关于Estimator的中文文档），封装得比较好，但是相应地修改起来不是很方便。一般来说，在Estimator的train/eval/predict中...

2019-11-25 09:51:09 3879 1

原创在远程服务器上使用tensorboard

网上很多教程都说在远程服务器上使用tensorboard要配ssh tunnel，把服务器的6006端口映射到本机的某个端口（比如16006端口），诸如ssh -L 16006:127.0.0.1:6006 ${ACCOUNT}@${SERVER_IP}这样的，然后在服务器上执行tensorboard --logdir="/path/to/log-directory"，最后在本机浏览器访问http...

2019-11-24 23:46:52 2647 6

原创 LeetCode Weekly Contest 164

5271. 访问所有点的最小时间平面上有 n 个点，点的位置用整数坐标表示 points[i] = [xi, yi]。请你计算访问所有这些点需要的最小时间（以秒为单位）。你可以按照下面的规则在平面上移动：每一秒沿水平或者竖直方向移动一个单位长度，或者跨过对角线（可以看作在一秒内向水平和竖直方向各移动一个单位长度）。必须按照数组中出现的顺序来访问这些点。示例 1：输入：points = ...

2019-11-24 16:43:32 225

原创 Linux sort命令二三事

Linux sort命令二三事Linux的sort命令可以用于文件内容（或标准输入）按行排序，基本格式是sort [OPTION]... [FILE]...如果不指定[FILE]参数，则对标准输入排序；如果指定多个[FILE]，则将多个文件拼接排序初识sort命令假设我们有一个文件input.txt，文件每行有两个字段，字段之间用空格分隔92 ead900 acbv3601 op...

2019-11-21 00:12:51 236

原创 XLNet论文解析

论文解析：XLNet: Generalized Autoregressive Pretraining for Language Understanding for Language Understanding论文地址: https://arxiv.org/pdf/1906.08237.pdf项目github仓库: https://github.com/zihangdai/xlnetXLNe...

2019-11-20 00:12:07 759

原创 LeetCode Contest 163

5263. 二维网格迁移给你一个 n 行 m 列的二维网格 grid 和一个整数 k。你需要将 grid 迁移 k 次。每次「迁移」操作将会引发下述活动：位于 grid[i][j] 的元素将会移动到 grid[i][j + 1]。位于 grid[i][m - 1] 的元素将会移动到 grid[i + 1][0]。位于 grid[n - 1][m - 1] 的元素将会移动到 grid[0]...

2019-11-17 21:20:46 136

原创 import tensorflow报错TypeError: new() got an unexpected keyword argument 'serialized_options'

环境tensorflow 1.11.0protobuf 3.6.1问题在上述环境中import tensorflow报错TypeError: __new__() got an unexpected keyword argument 'serialized_options'查看函数调用栈，调用栈的最后2层与protobuf有关，在网上搜索之后发现问题在于tensorflow 1.1...

2019-11-12 16:33:38 879

原创 ubuntu命令行裁剪图片

今天突然发现ubuntu命令convert可以用来裁剪图片，赶紧mark一下。identityidentity命令用来显示图片的具体信息，其中图片长宽信息是下一步裁剪的重要参考identify raw.pngconvertconvert命令指定-crop参数可以用来裁剪图片，命令格式为convert ${SOURCE_IMG} -crop ${HEIGHT}x${WIDTH}+${L...

2019-11-10 16:52:34 2304

原创 ssh登录服务器使用matplotlib绘图报错RuntimeError: Invalid DISPLAY variable

ssh登录服务器使用matplotlib绘图报错RuntimeError: Invalid DISPLAY variable，原因是Linux下matplotlib.pyplot的backend是Qt5Agg, 这是一个需要GUI的backend>>> import matplotlib.pyplot as plt>>> plt.get_backend()...

2019-11-07 14:03:29 694

原创 bert论文解析——BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding

BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding前言bert是google在NLP方面的一个重要的工作，可以说一定程度上改变了NLP领域的研究方式。bert获得了2019 NAACL的最佳长论文奖。简介预训练模型bert，连同之前的ELMO和GPT，可以说开创了NLP的『预训练...

2019-11-05 22:36:37 2986

原创 LeetCode 5247. Minimum Swaps to Make Strings Equal

Minimum Swaps to Make Strings EqualDifficulty: EasyYou are given two strings s1 and s2 of equal length consisting of letters “x” and “y” only. Your task is to make these two strings equal to each ot...

2019-11-03 11:35:52 374

da_kao_la的博客