【Python3】小工具
【Python3】小工具
北京小辉
余辉,硕士毕业于中科院,从事IT行业12年。专注于大数据、云数据、用户画像、推荐算法。在数据团队担任过的角色:研发、架构师、负责人、讲师。数据知识产权:出版大数据书籍【1】本,论文【2】篇,软著【6】篇,专利【65】篇。
展开
-
Intellij IDEA15:建立Python 工程
“无意中发现了一个巨牛的人工智能教程,忍不住分享一下给大家。教程不仅是零基础,通俗易懂,而且非常风趣幽默,像看小说一样!觉得太牛了,所以分享给大家。点这里 可以跳转到教程。”。#! /usr/bin/env python# -*- coding: utf-8 -*-def foo(): str="function" print(str);def foo1(num)...原创 2016-08-12 14:22:17 · 27640 阅读 · 3 评论 -
Python开发环境搭建和配置
目录:一、 前期准备二、 安装Python三、 安装PyCharm四、 PyCharm创建项目五、 PyCharm配置———————————————————————————————一、 前期准备百度云:http://pan.baidu.com/s/1kVsVcWZ二、 安装Python验证Pythonwindows系统,运行——cmd,进入dos窗口,输入python,安原创 2017-07-17 14:38:46 · 1085 阅读 · 0 评论 -
使用python监控HDFS文件的增量【优化中】
目录1、需求和步骤2、项目结构3、项目代码 3.1建表语句 hdfs_Ctreate_table 3.2删除文件记录 hdfs_delete_file_record.py 3.3文件路径的小时监控 hdfs_path_Monitor.py 3.4文件路径的天监控 hdfs_path_Monitor_day.py 3.5文件大小记录 h原创 2017-08-03 17:55:02 · 4668 阅读 · 0 评论 -
pycharm远程登录服务器执行
建立ssh连接,输入账户密码设置保存上传设置文件上传保存路径打开ssh与服务器建立连接结果展示原创 2017-07-28 10:11:35 · 2251 阅读 · 0 评论 -
win7上python2.7连接mysql数据库02
win7上python2.7连接mysql数据库,配置写到配置文件中,本例子找那个包括: 1、单条插入 2、批量插入 3、事务处理myapp.conf# database source[downdb]host = XXX.XXX.XXX.XXXport = 3306user = funnelpass = 1qaz@<2wsxdbName = user_privileges[ond原创 2017-08-07 10:06:18 · 921 阅读 · 0 评论 -
Python工具类
本篇将介绍python中sys, getopt模块处理命令行参数如果想对python脚本传参数,python中对应的argc, argv(c语言的命令行参数)是什么呢? 需要模块:sys 参数个数:len(sys.argv) 脚本名: sys.argv[0] 参数1: sys.argv[1] 参数2: sys.argv[2]文件名:paremters.py#!/usr原创 2017-07-13 14:38:29 · 1253 阅读 · 0 评论 -
将python 2.6.6 升级到 2.7.10以及安装setuptools和pip
查看python的版本#python -VPython 2.6.61.下载Python-2.7.10https://www.python.org/ftp/python/wget https://www.python.org/ftp/python/2.7.10/Python-2.7.10.tgz根据官方资源,可以下载最新版本2.解压tar -zxvf Python-2.7.10.t...原创 2018-09-25 15:13:21 · 1970 阅读 · 0 评论 -
通过python连接hive
需求:通过Anaconda3.6.7连接hive查询步鄹:下载pyhiveconda install pyhive查询脚本from pyhive import hiveconn = hive.Connection(host=&amp;quot;IP&amp;quot;, port=10000, username=&amp;quot;hive&amp;quot;)cursor= conn.cursor()c原创 2018-12-27 17:59:09 · 2324 阅读 · 0 评论 -
Python3 SMTP发送邮件
https://www.runoob.com/python3/python3-smtp.htmldef sendEmail(message): # 第三方 SMTP 服务 mail_host = "smtp.qq.com" # 设置服务器 mail_user = "[email protected]" # 用户名 mail_pass = "" # 口令 ...原创 2019-07-05 11:21:40 · 643 阅读 · 0 评论 -
Python爬虫(二)图片下载爬虫
# _*_ encoding:utf-8 _*_"""图片下载爬虫"""import reimport urllib2import urllib#获取网页内容def get_content(url): html=urllib2.urlopen(url) content=html.read() html.close() return content#根据网页内原创 2016-08-19 15:55:21 · 981 阅读 · 0 评论 -
win7上python2.7连接mysql数据库
一:安装MySQL-python驱动pip install mysql二:连接到MySQL服务器的test数据库#!/usr/bin/python# -*- coding: UTF-8 -*-import mysql.connectorif __name__ == "__main__": # 打开数据库连接 conn=mysql.connector.connect(host='原创 2017-01-13 13:55:42 · 1461 阅读 · 0 评论 -
微信统计数据的获取及存储
目录:1、需求:2、开发前期准备:3、代码结构:4、Mysql数据表设计:5、代码展示:6、结果展示:1、需求:熟悉获取微信统计数据的接口,并设计数据获取方案,微信数据接口文档地址:https://mp.weixin.qq.com/wiki/15/88726a421bfc54654a3095821c3ca3bb.html 2、开发前期准备:1、ACCESS_TOKEN:获取微信唯一标识ACCESS原创 2017-01-17 10:04:58 · 7038 阅读 · 0 评论 -
Python爬虫(一)热身
基础操作一import urllibimport chardet #字符集检测url = "http://www.163.com/"html = urllib.urlopen(url)print html.headers #头部信息print html.getcode() #状态码,如果是200则是正常状态print html.read() #读取内容print ht原创 2016-08-19 15:20:35 · 1033 阅读 · 0 评论 -
python批量kill某一个进程
python批量kill某一个进程#!/usr/bin/python# -*- coding: UTF-8 -*-import osimport syspyName = sys.argv[0]pyPath = sys.argv[1]print "脚本名:", pyName , "参数名:", pyPathlines = os.popen('ps -ef | grep %s' % py原创 2017-08-07 16:42:51 · 3518 阅读 · 0 评论 -
python读文件read()、readline()、readlines()三个方法的区别
#!/usr/bin/python# -*- coding: UTF-8 -*-'''Created on 2017年7月13日@author: yuhui'''import time; # 引入time模块"""1、读取文件的三个方法:read()、readline()、readlines()2、三个方法均可接受一个变量用以限制每次读取的数据量,通常不使用该变量。""""""关原创 2017-07-13 11:26:03 · 2037 阅读 · 0 评论 -
Python模块之ConfigParser - 读写配置文件
目录:1、配置文件的格式2、Unicode 编码的配置3、allow_no_value4、DEFAULT section5、插值 Interpolation——————————————————————————————-1、配置文件的格式a) 配置文件中包含一个或多个 section, 每个 section 有自己的 option;b) section 用 [sect_name] 表示,每个optio原创 2017-07-12 11:27:22 · 992 阅读 · 0 评论 -
python 移动文件或文件夹操作
目录:1、python中对文件、文件夹操作时经常用到的os模块和shutil模块常用方法2、文件操作方法大全3、目录操作方法大全————————————————————————————–1、python中对文件、文件夹操作时经常用到的os模块和shutil模块常用方法。1.得到当前工作目录,即当前Python脚本工作的目录路径: os.getcwd()2.返回指定目录下的所有文件和目录名:os.li原创 2017-07-10 17:02:09 · 110357 阅读 · 0 评论 -
Linux离线安装Python3以及各种依赖
下载python3.7.3官网:https://www.python.org/downloads/source/安装python3.7.31.安装pythyon相关依赖yum install -y ncurses-libs zlib-devel mysql-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readlin...原创 2019-08-13 11:16:28 · 21756 阅读 · 1 评论