- 博客(17)
- 资源 (2)
- 收藏
- 关注
原创 数据库性能优化思路
硬件优化。升级硬件设备。 数据库服务器调优。例如,Oracle 有很多参数调整。 引入缓存技术。例如,Redis,减小数据库压力。 程序与数据库表优化。重构,优化SQL;例如,根据业务逻辑做优化,减少不必要的查询; 最后在前4项优化后,性能得不到大幅度提升情况下,再考虑分库分表。如果数据量级达不到,分库分表也会带来更多麻烦。...
2019-08-30 17:13:55 201
原创 python pip install 第三方库,报错:Read timed out
报错具体信息: File "d:\python\python27\lib\site-packages\pip\basecommand.py", line 215, in main status = self.run(options, args) File "d:\python\python27\lib\site-packages\pip\commands\install.py"
2017-11-29 18:03:15 1274
原创 python pylab.plot() 方法使用
Python 中用pylab模块, pylab.plot() 函数,绘制折线统计图import pylab as plx = [100, 50, 80, 70]y = [1, 2, 3, 4]'''plot参数说明: x: x轴坐标列表 y: y轴坐标列表 marker: 点型 linestyle: 连接线型 ma
2017-11-29 17:52:00 11135 3
原创 Numpy模块的方法
python中Numpy模块的方法总结注意:numpy 处理数据时,只能是同一种数据类型import pandas as pd 可以处理不同的数据类型importnumpy asnp一、基本方法alist = [10,5,9,0,5,16]print '求和:', np.sum(alist),sum(alist)print '平均数:',
2017-11-29 17:51:00 247
原创 error: Microsoft Visual C++ 9.0 is required (Unable to find vcvarsall.bat)
报错信息:error: Microsoft Visual C++ 9.0 is required (Unable to find vcvarsall.bat). Get it from http://aka.ms/vcpython27环境:window 10python 2.7.12 安装时报错pip install wordcloud解决方法:python
2017-11-29 17:15:16 646
原创 com.google.protobuf.ServiceException: java.lang.NoClassDefFoundError: com/yammer/metrics/core/Gauge
用spark 向Hbase 表中添加数据时报错报错内容:17/07/20 18:23:36 INFO client.RpcRetryingCaller: Call exception, tries=11, retries=35, started=50817 ms ago, cancelled=false, msg=com.google.protobuf.ServiceExcepti
2017-07-20 18:44:34 7922 2
原创 python自然语言处理之加载本地语料库
python自然语言处理之加载本地语料库from nltk.corpus import PlaintextCorpusReader# 语料库本地目录coupus_root = "E:\\guoby\\temp\\dict"# 加载文件过滤file_pattern = '.*'wodslist = PlaintextCorpusReader(coupus_root, f
2017-06-20 17:37:31 3451
原创 python 安装 Scrapy 报错(已解决)
安装参考:https://doc.scrapy.org/en/latest/intro/install.html#intro-install本人通过:pipinstallScrapy 安装报以下错:\twisted\internet\test\fake_CAs copying src\twisted\internet\test\fake_CAs\thin
2017-06-05 16:35:53 4423
原创 Exceeded memory limit for $group, but didn't allow external sort. Pass allowDiskUse:true to opt in.
python 调用mongo aggregate函数 提示错误:pymongo.errors.OperationFailure: Exceeded memory limit for $group, but didn't allow external sort. Pass allowDiskUse:true to opt in.本地环境:python2.7_32MongoDB
2017-04-14 15:13:54 13853
原创 pip install scipy报错:numpy.distutils.system_info.NotFoundError: no lapack/blas resources found
windows pip install scipy报错:本机电脑64位,下载:scipy-0.19.0-cp27-cp27m-win32.whl,即可安装成功下载地址:http://www.lfd.uci.edu/~gohlke/pythonlibs/#scipy-cluster
2017-04-11 14:20:50 2556
原创 python string 转dict
# -*- coding: utf-8 -*-import astimport jsonstrjson = '{"host":"192.168.1.1", "port":3306}'# 方式一: string 转 dictresjson = ast.literal_eval(strjson)print type(strjson)print type(resjson)# 方式
2017-04-10 14:50:17 4824
原创 UnicodeDecodeError: 'utf8' codec can't decode byte 0xd4 in position 0: invalid continuation byte
场景:python 读取 csv文件写入mongo数据库解决:将csv文件格式设置为‘UTF-8无BOM编码编码’即可
2016-11-22 17:45:34 5991
原创 'latin-1'codec can't encode characters in postion 52-55:ordinal not in range(256)
Python+mysqlMySQLdb.connect(host=’localhost’,user=’root’,passwd=’123456’,db=’testdb’,charset=’utf8’)缺少:charset=’utf8’
2016-08-12 17:30:34 790
原创 gir 入门命令
本文主要说明git的基础使用。请先到github(官网)注册一个帐号,下载安装好git。第一步:在本地创建一个目录作为git仓库。第二步:通过git init 命令把该目录作为git可以管理的仓库。使用命令:git init说明:该命令完成后,该目录下会添加一个.git 文件,则成功。该文件是git来跟踪管理版本的,不可随意删改。第三步:添加文件到暂存区
2016-05-12 18:18:23 2389
ssh远程连接工具
2017-09-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人