Python
Dr.Zhu
keep calm and carry on
展开
-
python 主线程读取数据写入队列,多线程消费队列数据
备忘记录主线程读取数据写入队列,多线程消费队列数据。# -*- coding: UTF-8 -*-# !/usr/bin/python3import loggingimport queueimport threadingimport timeimport pymysqlfrom dbutils.pooled_db import PooledDB###############参数配置######################host = "host"port = 3306db原创 2021-09-16 10:58:11 · 1003 阅读 · 0 评论 -
python脚本scrollId search查询并导出elasticsearch所有数据
ElasticSearch version:6.2.2#!/usr/bin/python#coding:utf-8import jsonimport osimport sysimport timeimport urllib2import urllibreload(sys)sys.setdefaultencoding('utf-8')class exportEsData(): scroll_id = '' def __init__(self, url,index,t原创 2020-11-09 11:25:34 · 598 阅读 · 0 评论 -
Python之连接MySQL之发送邮件整合
目的:查询数据库中有没有最新的数据,然后发送邮件通知;查询数据库代码:#!/usr/bin/pythonimport MySQLdbimport timeimport datetimeimport testmailISOTIMEFORMAT='%Y-%m-%d'now = ''send_data = ''con=MySQLdb.connect(host="***",us原创 2016-04-15 11:45:13 · 718 阅读 · 0 评论 -
Django+python 日志文件配置
原文链接:http://www.yihaomen.com/article/python/262.htm项目的开发过程中,日志文件是少不了的,通过写日志文件,可以知道程序运行的情况。特别当部署在生产环境中的时候,这个时候一般不能debug , 当然在有些情况时可以 remote debug (远程debug)。那种情况另当别论。还是用通常的写日志的方法,比如在 java 中,经常可以看到 log转载 2015-11-02 18:25:11 · 1157 阅读 · 0 评论 -
Python 使用thrift连接hbase || 远程连接hbase
1.首先下载Python & thrift &hbase有两种安装thrift的方式:1.下载的thrift-0.9.3.tar.gz >> 解压 tar xzvf thrift-0.9.3.tar.gz >> ./configure >> make >> make install >>thrift -version 验证 2.解压之后进入lib/py/ >> 执行Python原创 2015-10-13 15:53:48 · 4100 阅读 · 0 评论 -
Python之安装pip&beautiful4&使用beautifulsoup4抓取简单网页
前期准备环境python2.7.3 +centos7首先是安装pip 然后使用pip安装beautifulsoup4、lxml、和html5lib在命令行中输入:wget "https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz#md5=834b2904f92d46aaa333267fb1c922bb" --n原创 2017-01-18 15:45:29 · 6971 阅读 · 0 评论