python
jie310600
这个作者很懒,什么都没留下…
展开
-
python 应用
python 应用 爬虫框架Scrapy(基于python语言做的进行数据爬取的框架),在Scrapy里,使用一种叫做 XPath selectors的机制,它基于 XPath表达式(用于获取指定的数据)。 数据分析,python已经有很多基于数据分析的函数库和工具,使得分析数据非常方便,如Numpy(科学计算的基础包,),Pandas(高级的数据结构和操作工具,它们使得Pyth...原创 2018-07-20 16:36:10 · 81 阅读 · 0 评论 -
python 爬虫相关技术
python 爬虫相关技术 phantomjs :一个基于 WebKit 的服务器端 JavaScript API,就是一个提供了js接口的无界面浏览器。 selenium:Selenium是一个Web的自动化测试工具,最初是为网站自动化测试而开发的,最初是为网站自动化测试而开发的,类型像我们玩游戏用的按键精灵,可以按指定的命令自动化操作,不同是Selenium可以直接运行在浏览器...原创 2018-09-14 14:28:31 · 238 阅读 · 0 评论 -
pyspider示例
[code="java"]#!/usr/bin/env python # -*- encoding: utf-8 -*- # Created on 2018-09-10 20:19:29 # Project: reo from pyspider.libs.base_handler import * class Handler(BaseHandler): crawl_...原创 2018-09-16 14:58:47 · 215 阅读 · 0 评论 -
selenium例子
[code="java"]from selenium import webdriver print("start....\n") driver = webdriver.PhantomJS() url = "http://www.sohu.com/" driver.get(url) driver.save_screenshot("sohu.png") print("ok!\n")[/...原创 2018-09-16 15:02:19 · 153 阅读 · 0 评论 -
python mysql 示例
[code="java"]#!/usr/bin/python3 import pymysql # 打开数据库连接 db = pymysql.connect("localhost", "root", "123456", "test") # 使用 cursor() 方法创建一个游标对象 cursor cursor = db.cursor() # 使用 execute() ...原创 2018-09-16 15:03:07 · 78 阅读 · 0 评论 -
Numpy 小结
Numpy 小结 Numpy Numpy(Numerical Python)是一个开源的、高性能的Python数值计算库为提高运算效率 标准Python的列表(list)中,元素本质是对象。如:L = [1, 2, 3],需要3个指针和三个整数对象,对于数值运算比较浪费内存和CPU。因此,Numpy提供了ndarray(N-dimensional array object)对象:...原创 2018-09-27 10:24:32 · 133 阅读 · 0 评论