python
jie310600
这个作者很懒,什么都没留下…
展开
-
python 应用
python 应用 爬虫框架Scrapy(基于python语言做的进行数据爬取的框架),在Scrapy里,使用一种叫做 XPath selectors的机制,它基于 XPath表达式(用于获取指定的数据)。数据分析,python已经有很多基于数据分析的函数库和工具,使得分析数据非常方便,如Numpy(科学计算的基础包,),Pandas(高级的数据结构和操作工具,它们使得Pyth...原创 2018-07-20 16:36:10 · 86 阅读 · 0 评论 -
python 爬虫相关技术
python 爬虫相关技术phantomjs :一个基于 WebKit 的服务器端 JavaScript API,就是一个提供了js接口的无界面浏览器。selenium:Selenium是一个Web的自动化测试工具,最初是为网站自动化测试而开发的,最初是为网站自动化测试而开发的,类型像我们玩游戏用的按键精灵,可以按指定的命令自动化操作,不同是Selenium可以直接运行在浏览器...原创 2018-09-14 14:28:31 · 252 阅读 · 0 评论 -
pyspider示例
[code="java"]#!/usr/bin/env python# -*- encoding: utf-8 -*-# Created on 2018-09-10 20:19:29# Project: reofrom pyspider.libs.base_handler import *class Handler(BaseHandler): crawl_...原创 2018-09-16 14:58:47 · 229 阅读 · 0 评论 -
selenium例子
[code="java"]from selenium import webdriverprint("start....\n")driver = webdriver.PhantomJS()url = "http://www.sohu.com/"driver.get(url)driver.save_screenshot("sohu.png")print("ok!\n")[/...原创 2018-09-16 15:02:19 · 165 阅读 · 0 评论 -
python mysql 示例
[code="java"]#!/usr/bin/python3import pymysql# 打开数据库连接db = pymysql.connect("localhost", "root", "123456", "test")# 使用 cursor() 方法创建一个游标对象 cursorcursor = db.cursor()# 使用 execute() ...原创 2018-09-16 15:03:07 · 90 阅读 · 0 评论 -
Numpy 小结
Numpy 小结NumpyNumpy(Numerical Python)是一个开源的、高性能的Python数值计算库为提高运算效率标准Python的列表(list)中,元素本质是对象。如:L = [1, 2, 3],需要3个指针和三个整数对象,对于数值运算比较浪费内存和CPU。因此,Numpy提供了ndarray(N-dimensional array object)对象:...原创 2018-09-27 10:24:32 · 150 阅读 · 0 评论