2015年09月_小样1994

原创无聊之作·->当两个机器人聊天会发生什么？

当两个机器人在一起聊天会发生什么？本着无聊的精神和有病的思想，我做了一个实验。使用器材：1。linux系统（windows下socket无法对话）1。Python2。图灵机器人原理：1。使用图灵机器人api进行对话，原本打算用两种不同的机器人进行对话，但是用到的另外一个逗比机器人速度太慢，就没有去用了。2。使用socket协议进行两个机器人的对话。其实这里不仅可

2015-09-26 20:20:42 5425

转载简单理解socket协议

TCP/IP要想理解socket首先得熟悉一下TCP/IP协议族， TCP/IP（Transmission Control Protocol/Internet Protocol）即传输控制协议/网间协议，定义了主机如何连入因特网及数据如何再它们之间传输的标准，从字面意思来看TCP/IP是TCP和IP协议的合称，但实际上TCP/IP协议是指因特网整个TCP/IP协议族。不同于ISO模型的七个

2015-09-26 18:28:26 16924 1

转载进程与线程的一个简单解释

看到一篇解释进程和进程很有意思的一篇文章，再次转载。进程（process）和线程（thread）是操作系统的基本概念，但是它们比较抽象，不容易掌握。最近，我读到一篇材料，发现有一个很好的类比，可以把它们解释地清晰易懂。1.计算机的核心是CPU，它承担了所有的计算任务。它就像一座工厂，时刻在运行。2.假定工厂的电力有限，一次只能供给一个车间使用。也就是

2015-09-23 08:23:05 558

原创【计蒜客】基础算法入门之快速排序

很想写一个很好的文章引子，但是囿于语文水平有限，写不出什么好东西来，干脆就随便写点东西吧。之前写的文章都是关于爬虫的，爬虫虽好，但是写来写去就是那些东西，是时候学习点新东西了！现在自己很缺关于算法的知识，于是就上计蒜客学习了基础算法入门，但是苦于它教学用的是C++，而我大一学过C++，现在早就忘光了。于是我将写几篇系列文章，将计蒜客上面的C++算法改写成Python。这是第四篇文章《快速排

2015-09-22 09:51:20 833

原创【计蒜客】基础算法入门之深度搜索(2)蒜头学算术d

很想写一个很好的文章引子，但是囿于语文水平有限，写不出什么好东西来，干脆就随便写点东西吧。之前写的文章都是关于爬虫的，爬虫虽好，但是写来写去就是那些东西，是时候学习点新东西了！现在自己很缺关于算法的知识，于是就上计蒜客学习了基础算法入门，但是苦于它教学用的是C++，而我大一学过C++，现在早就忘光了。于是我将写几篇系列文章，将计蒜客上面的C++算法改写成Python。这是第三篇文章《深度搜

2015-09-21 21:57:05 997

原创【计蒜客】基础算法入门之深度搜索

很想写一个很好的文章引子，但是囿于语文水平有限，写不出什么好东西来，干脆就随便写点东西吧。之前写的文章都是关于爬虫的，爬虫虽好，但是写来写去就是那些东西，是时候学习点新东西了！现在自己很缺关于算法的知识，于是就上计蒜客学习了基础算法入门，但是苦于它教学用的是C++，而我大一学过C++，现在早就忘光了。于是我将写几篇系列文章，将计蒜客上面的C++算法改写成Python。这是第二篇文章《深度搜索》

2015-09-19 20:12:31 1189

原创【计蒜客】基础算法入门之二分查找

很想写一个很好的文章引子，但是囿于语文水平有限，写不出什么好东西来，干脆就随便写点东西吧。之前写的文章都是关于爬虫的，爬虫虽好，但是写来写去就是那些东西，是时候学习点新东西了！现在自己很缺关于算法的知识，于是就上计蒜客学习了基础算法入门，但是苦于它教学用的是C++，而我大一学过C++，现在早就忘光了。于是我将写几篇系列文章，将计蒜客上面的C++算法改写成Python。这是第一篇文章《二分查找》

2015-09-19 19:38:24 1843

原创 SAE部署Python-让云端自动运行Python代码

之前写过模拟登录新浪微博的帖子，然而我并没有去爬过微博的数据，觉得有点浪费，于是就想写一个代码来发微博。写完之后觉得如果能自动发微博就好了，但是我又不可能24小时开始（晚上12点后还会断网），也没有vps（穷学生狗），找过几个免费vps未果，然后想到之前用过新浪SAE，就想能不能在上面试试。试了一天左右终于让我试出来了！！基本实现了： 1、定时发送，这里是定时半小时 2、离线自动，基

2015-09-09 12:43:08 9293 3

原创写了一个增量式的爬虫，但是并不完美，希望大牛们可以指正指正！

写了一个增量式的爬虫，但是并不完美，希望大牛们可以指正指正！爬虫以爬4567.tv这个网站的电影为例。把保存过得电影链接以set的形式保存到本地，然后下次运行的时候就会读取这些链接，然后用set的运算将去除以解析过得链接。比如:a=set([1,2,3])#假设这是上次解析过得b=set([3,4,5])#这是本次要解析的链接，但是3是上次解析过的c=(a|b)-a # c=set

2015-09-08 20:05:16 6463

原创 Python爬虫框架--pyspider初体验

之前接触scrapy本来是想也许scrapy能够让我的爬虫更快，但是也许是我没有掌握scrapy的要领，所以爬虫运行起来并没有我想象的那么快，看这篇文章就是之前使用scrapy的写得爬虫。然后昨天我又看到了pyspider，说实话本来只是想看看，但是没想到一看就让我喜欢上了pyspider。先给大家看一下pyspider的后台截图： pyspider是国人写的一款开源爬虫框架，个人觉得这个框架

2015-09-05 10:57:33 25572 2

原创 scrapy爬虫和自写爬虫对比--爬jobbole文章

前几天写了一个爬虫，用来爬伯乐在线的python版块的文章。其实这个爬虫只是保存网页而已，因为伯乐在线的文章既有图片又有代码，爬主要部分的话排版很难看，不如直接把网页保存下来。然后这两天就在看python的一个轻量级爬虫框架–scrapy，并尝试用scrapy写爬虫。一开始觉得毫无头绪，后来慢慢就觉得挺好使的。但是好使归好使，就是不知道性能如何？于是就用scrapy也写一个爬虫来爬伯乐在线的文章

2015-09-02 12:41:56 6991 3

小样的博客