zaishijizhidian的博客

原创 解决PyCharm 中File size exceeds configured limit (2560000),文件大小不够的问题

  用PyCharm 打开较大文件的时候，出现错误提示“File size exceeds configured limit (2560000), code insight features not available”，在网上查找了相关问题，是因为IDEA对能关联的文件大小做了限制，主要是为了保护内存，默认值为2500kb解决办法：下面的idea.properties文件中添加一行...

原创 2018.7月第四周工作复盘

原创 解决json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)问题

解决办法：这是json格式不对引起的错误我查看一下源码，我的判断条件是response.status_code == 200出现两种情况：无数据有数据于是将判断条件改为if response.content就可以满足条件了   ...

原创 解决windows下使用pip install scrapy报错cannot open include file: 'io.h':....问题

问题背景：windows10 + Anacoda3 环境，在使用pip 安装scrapy 安装包时报错：提示要安装Visual C++ Build Tools于是在windows10安装但是我安装完之后，还是报同样的错误，于是Google一下：于是继续下载 windows10 SDK安装包安装后重启，之后执行pip install scrapy 就可以正常安装了...

原创 在杭州某银行项目部署的工作经历回顾

之前工作积累的数据需要到合作伙伴某银行上内部进行部署，中间遇到很多坑，最后都一一解决了，现在把遇到的坑都好好总结一下，以后遇到同样的问题，可作为参考。 数据的导入 1.将mysql数据库操作：把原数据库中的表数据结构导成sql文件 把原数据库中的表数据导成.txt文件 把load file 的sql 脚本导成sql文件   2.优化mysql的存储配置[mysqld...

原创 2018.7月第三周复盘

原创 2018.7月第二周复盘

转载 linux系统 由python2.6 升级到python3.4

Linux下Python2的升级方法： 一、下载Python3安装包： 1、在线下载 wget https://www.python.org/ftp/python/3.4.5/Python-3.4.5.tgz 2、下载python3 依赖环境执行： # yum install openssl-devel bzip2-devel expat-devel gdbm-devel ...

原创 解决Elasticesearch中传输经纬度坐标（geo-point）无法识别的问题

应用场景：在往Elasticesearch中传输数据的过程中，后台人员无法获取经纬度值，后来在官方文档中查到：地理坐标点（geo-point）是指地球表面可以用经纬度描述的一个点。地理坐标点可以用来计算两个坐标位置间的距离，或者判断一个点是否在一个区域中。地理坐标点不能被动态映射（dynamic mapping）自动检测，而是需要显式声明对应字段类型为geo_point。这也就是说，如果不对经纬度...