Windows下用pip安装scrapy

Scrapy 是一个自由开源的Python爬虫框架,虽然其官方主页有安装指导,但是在Windows下实现起来却没有那么容易。自己一番折腾之后总算可以正常运行,这里总结一下。 Anaconda (IPython) Win 32bits (python version: 2.7)lxml...

2016-03-22 11:24:09

阅读数 374

评论数 0

用文件锁排他锁实现商品秒杀、抢购

在处理下单请求的时候,用flock锁定一个文件,如果锁定失败说明有其他订单正在处理,此时要么等待要么直接提示用户"服务器繁忙",计数器存储抢购的商品数量,避免查询数据库。 阻塞(等待)模式:并发时,当有第二个用户请求时,会等待第一个用户请求完成、释放锁,获得文件锁之后,程序才...

2016-02-23 14:44:39

阅读数 1574

评论数 0

py2exe将py打包成exe程序

下载py2exe,注意对应的python版本,比如所用的python版本为2.7,那么就下载适配2.7版本的py2exe软件,下载完成后安装。 py2exe 2.7 下载地址:  http://download.csdn.net/download/shmilylich/4659040 #!p...

2016-02-23 12:03:48

阅读数 270

评论数 0

python爬虫(抓取百度图片)

一、python请求要抓取的url页面 【%E7%BE%8E%E5%A5%B3】urlcode解码之后就是【美女】 可以看到这是百度图片的api接口 :http://image.baidu.com/search/avatarjson?tn=resultjsonavatarnew&...

2016-02-23 11:05:59

阅读数 14110

评论数 0

python爬虫(抓取百度新闻列表)

一、python请求要抓取的url页面 要抓取的url http://news.baidu.com/ ,先python模拟请求该url#!/usr/bin/python # -*- coding:utf-8 -*- import httplib class NewsBaidu(object...

2016-02-23 09:54:38

阅读数 4971

评论数 1

一些php操作redis常用方法代码

1,connect 描述:实例连接到一个Redis. 参数:host: string,port: int 返回值:BOOL 成功返回:TRUE;失败返回:FALSE 示例: 复制代码代码如下: $redis = new redis();   $result...

2016-02-22 15:08:38

阅读数 192

评论数 0

PHP安装PHPRedis扩展

一。linux安装方法 phpredis下载地址:https://github.com/nicolasff/phpredis   unzip phpredis-master.zip  cd phpredis-master /usr/local/php5/bin/phpize ./con...

2016-02-22 14:29:58

阅读数 165

评论数 0

windows下安装redis

1、redis简介 redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hashs(哈希类型)。这些数据类型都支持push/pop、a...

2016-02-22 14:04:24

阅读数 333

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭