AnddyWang

每行一条记录^A 分隔列（八进制 \001）^B 分隔ARRAY或者STRUCT中的元素，或者MAP中多个键值对之间分隔（八进制 \002）^C 分隔MAP中键值对的“键”和“值”（八进制 \003）

每行一条记录^A 分隔列（八进制 \001）^B 分隔ARRAY或者STRUCT中的元素，或者MAP中多个键值对之间分隔（八进制 \002）^C 分隔MAP中键值对的“键”和“值”（八进制 \003）

说明：spark2.1.0(含)以下的版本不支持Python3.6安装注意版本，请先检查版本步骤1. 创建虚拟python环境这个不多介绍了，不管是通过annaconda还是virtualenv，创建好你自己的python环境。如果你也碰到了离线的平台，建议查看上面的 坑2：自己用docker做一个和服务器一样的系统版本，在上面完成虚拟的环境的创建，再将其拷贝出来；2. 打包虚拟环境并将其上传hdfs创建好环境后，进入到环境所在的文件夹，例如你的环境是 ***/***/py35, c

问题相信大家都知道在目录中搜索含有固定字符串文件的命令： 1 find . -name '*.py' |xargs grep test 刚开始的时候，我不熟悉xargs命令，所以直接使用的命令是 1 find . -name '*.py' |grep test 结果并不是自己所期望的。此命令只是找出文件名*.txt有test的情况。这里我就研究一下，究竟xargs做了什么，使得结...

在使用json格式保存数据时，经常会遇到xxx is not JSON serializable，也就是无法序列化某些对象格式其中使用numpy时，使用了np的数据格式，写入data后，json.dumps(data)失败的问题，可通过自定义序列化方法解决1.继承json.JSONEncoder，自定义序列化方法。class CustomEncoder(json.JSONEncode...

写完代码后，我们一般这样git add . //添加所有文件git commit -m ""参数：--mixed意思是：不删除工作空间改动代码，撤销commit，并且撤销git add . 操作这个为默认参数,git reset --mixed HEAD^ 和 git reset HEAD^ 效果是一样的。--soft 不删除工作空间改动代码，撤销c...

ImportError: libSM.so.6: cannot open shared object file: No such file or directoryImportError: libXrender.so.1: cannot open shared object file: No such file or directoryImportError: libXext.so.6: ca...

首先解释一下上表。 anaconda在每次发布新版本的时候都会给python3和python2都发布一个包，版本号是一样的。表格中，python版本号下方的离它最近的anaconda包就是包含它的版本。举个例子，假设你想安装python2.7.14，在表格中找到它，它下方的三个anaconda包（anaconda2-5.0.1、5.1.0、5.2.0）都包含python2.7.14；...

缺失libgthread-2.0.so.0ImportError: libgthread-2.0.so.0: cannot open shared object file: No such file or directoryapt-get install libglib2.0-0缺失libSM.so.6ImportError: libSM.so.6: cannot open...

对于手机、相机等设备拍摄的照片，由于手持方向的不同，拍出来的照片可能是旋转0°、90°、180°和270°。即使在电脑上利用软件将其转正，他们的exif信息中还是会保留方位信息。在用PIL读取这些图像时，读取的是原始数据，也就是说，即使电脑屏幕上显示是正常的照片，用PIL读进来后，也可能是旋转的图像，并且图片的size也可能与屏幕上的不一样。对于这种情况，可以利用PIL读取exif中...

http://www.image-net.org/challenges/LSVRC/2012/nnoupb/ILSVRC2012_img_test.tarhttp://www.image-net.org/challenges/LSVRC/2012/nnoupb/ILSVRC2012_img_val.tarhttp://www.image-net.org/challenges/LSVRC/2...

PIL.Image转换成OpenCV格式：import cv2from PIL import Imageimport numpyimage = Image.open("plane.jpg")image.show()img = cv2.cvtColor(numpy.asarray(image),cv2.COLOR_RGB2BGR)cv2.imshow("OpenCV",img)...

中文检测的数据集，目前最火的应该是清华的CTW，https://ctwdataset.github.io/但是它的数据集只存储在微云和google driver，微云空间受限不能完全保存，所以下载的时候很蛋疼。我这边就挑了一个相对较小的数据集——MSRA TD5000，这个数据集支持中英文的倾斜文本检测。详情参考MSRA的官方地址：http://www.iapr-tc11.org/med...

打开Beyond Compare 4，提示已经超出30天试用期限制，解决方法：1.修改C:\Program Files\Beyond Compare 4\BCUnrar.dll ,这个文件重命名或者直接删除，则会新增30天试用期，再次打开提示还有28天试用期。2.一劳永逸，修改注册表1)在搜索栏中输入 regedit ，打开注册表2) 删除项目：计算机\HKEY_CURRENT_...

转载：https://www.cnblogs.com/xujiu/p/8352635.html在python中，这两个是python中的可变参数，*arg表示任意多个无名参数，类型为tuple;**kwargs表示关键字参数，为dict。# *允许你传入0个或任意个参数，这些可变参数在函数调用时自动组装为一个tuple。def f(a,*args): print(args)...

一、SWT识别：yestinsong/Text-Detection( Text Detection System with MSER , SWT and Text Verification(fft and pca) )https://github.com/yestinsong/Text-Detectionaperrau/DetectText：Detect text with stroke w...

转载出处：http://www.cnblogs.com/willnote/p/6746668.html图示说明 用一个3x3的网格在一个28x28的图像上做切片并移动 移动到边缘上的时候，如果不超出边缘，3x3的中心就到不了边界 因此得到的内容就会缺乏边界的一圈像素点，只能得到26x26的结果 而可以越过边界的情况下，就可以让3x3的中心到达边界的像素点...

MySQL 修改数据路径比如想将/var/lib/mysql 移动到/usr/local/mysql 目录停止MySQL 服务service mysqld stop修改MySQL配置 my.cnf#datadir=/var/lib/mysql#socket=/var/lib/mysql.sockdatadir=/usr/local/mysqlsocket=/usr/...