python
文章平均质量分 81
L13763338360
这个作者很懒,什么都没留下…
展开
-
python写带ACL的kafka集群问题
python的第三方kafka包问题,导致写带ACL功能的kafka集群异常。原创 2022-08-11 18:28:26 · 946 阅读 · 0 评论 -
解决matplotlib中文显示异常问题
1. 执行命令,获取matplotlibrc文件路径import matplotlibprint(matplotlib.matplotlib_fname())如下/Users/haiping.lai/miniconda3/lib/python3.9/site-packages/matplotlib/mpl-data/matplotlibrc2. 修改matplotlibrcfont.family: sans-seriffont.sans-serif: SimHei,.原创 2022-01-10 12:36:22 · 3208 阅读 · 3 评论 -
启动jupyter
问题现象(base) [xxx@ip-10-169-49-131 sztoc_audiencemanager]$ jupyter notebook --no-browser --port=1234The Jupyter HTML Notebook.这将启动一个基于tornado的HTML笔记本服务器,它提供一个html5/javascript笔记本客户端。Traceback (most recent call last): File "/usr/share/miniconda2/env.原创 2022-01-06 10:12:20 · 260 阅读 · 0 评论 -
curl或者python脚本请求127.0.0.1返回504错误
本地起了一个测试服务,浏览器可以正常访问,curl或者python请求返回504错误。问题描述1. 本地读了一个简单的java服务,用浏览器请求,正常返回。2. 一些复杂的请求,需要postman或者python脚本来完成,用postman尝试,也正常访问。3. 用python的requests模块请求时,总是返回504错误。import timeimport requestsdef test(): start_time = time.time() res = ...原创 2021-01-18 10:52:08 · 2322 阅读 · 0 评论 -
centos下python安装pgadmin
python安装pgadmin方法https://blog.csdn.net/java1993666/article/details/85635789启动pgadmin的时候报错#python pgAdmin4.pyTraceback (most recent call last): File "pgAdmin4.py", line 34, in <module> import config File "/root/miniconda3/lib/python3...原创 2021-01-06 19:03:25 · 2085 阅读 · 0 评论 -
python安装kafka客户端
问题现象本地环境python 3.8.3版本pip install kafka,还是无法导入KafkaConsumer(base) leonlai@LEONLAI-MB0 ~ % pythonPython 3.8.3 (default, May 19 2020, 13:54:14)[Clang 10.0.0 ] :: Anaconda, Inc. on darwinType "help", "copyright", "credits" or "license" for more inf.原创 2020-12-30 15:43:02 · 4856 阅读 · 0 评论 -
to_sql写pg性能问题跟踪解决
1. 问题描述最近有部分数据,从原来写mysql实例,改成写pg实例,用pandas.DataFrame.to_sql方法。期间发现,同样的数据写mysql和pg,差异相当大10万+数据量,mysql 1-3秒,pg 2-3分钟40万+数据量,mysql 5-8秒,pg 9-10分钟写pg代码如下engine = create_engine('postgresql://use:password@host:port/database')connect = engine.connect原创 2020-11-26 18:16:08 · 1006 阅读 · 0 评论 -
thriftpy依赖安装问题
安装第三方库的时候,依赖于thriftpy,报错如下Building wheel for thriftpy (setup.py) ... error ERROR: Command errored out with exit status 1: command: /data/home/leonlai/miniconda3/bin/python -u -c 'import sys, setuptools, tokenize; sys.argv[0] = '"'"'/tmp/pip-install...原创 2020-11-05 16:51:16 · 1175 阅读 · 0 评论 -
mlflow安装问题
1.创建文件夹mkdir mlworkcd mlwork2. 创建一个干净的venv环境[hdfs@xydwtest01 ~/mlwork]$ source ~/miniconda3/bin/activate(root) [hdfs@xydwtest01 ~/mlwork]$ virtualenv-bash: virtualenv: command not found...原创 2019-12-25 19:34:08 · 1274 阅读 · 1 评论 -
解决Python连接hive环境问题
问题(root) [user_00@VM_121_192_centos ~/ivan.chen]$ python demo.pyTraceback (most recent call last): File "demo.py", line 4, in <module> g_spark_conn = create_engine('hive://hdfs:LXA0QV...原创 2019-12-09 21:29:20 · 1597 阅读 · 0 评论 -
kudu支持python连接访问
wget https://archive.cloudera.com/cdh6/6.2.0/redhat7/yum/RPMS/x86_64/kudu-client0-1.9.0+cdh6.2.0-967373.el7.x86_64.rpmwget https://archive.cloudera.com/cdh6/6.2.0/redhat7/yum/RPMS/x86_64/kudu-clien...原创 2019-11-25 16:29:17 · 856 阅读 · 0 评论 -
linux下python安装psycopy2问题
问题现象linux系统版本:CentOS 6以上(root) [hdfs@xydw56 ~]$ python -m pip install -i http://pypi.douban.com/simple --trusted-host=pypi.douban.com psycopg2Looking in indexes: http://pypi.douban.com/simple...原创 2019-11-13 16:15:37 · 1074 阅读 · 0 评论 -
python安装sasl问题
安装sasl时,提示有问题(root) [root@116_centos /home/server/monitor_task]# pip install saslLooking in indexes: http://mirrors.tencentyun.com/pypi/simpleCollecting sasl Downloading http://mirrors.tencenty...原创 2019-11-08 14:39:40 · 9105 阅读 · 4 评论 -
字典dict转换成DataFrame
>>> import pandas as pd>>> temp= {'a' : 1, 'b' : 2}>>> pd.DataFrame([temp]) a b0 1 2原创 2019-11-06 15:19:05 · 426 阅读 · 0 评论 -
python3使用paramiko模块时告警
paramiko是个很适合做远程控制的模块,python要求3.0以上版本。使用的过程中遇到一些问题root/miniconda3/lib/python3.6/site-packages/cryptography/hazmat/backends/openssl/ciphers.py:114: UserWarning: implicit cast from 'char *' to a di...原创 2019-11-05 17:32:44 · 1578 阅读 · 0 评论