- 博客(2)
- 收藏
- 关注
原创 爬虫--scrapy 初探
网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。写爬虫比较popular的语言是python,楼主主要就是用python写,到现在也写过一二十个简单爬虫了; 网上也有写的比较好的介绍 http://www.zhihu.com/question/20899988盗个图,这就是基本原理 大概流程有 :
2015-10-31 13:51:33 256563
原创 S3增加防盗链功能和备份策略
下文所述基本都是基于控制台配置的,比较方便S3作为AWS里的文件存储服务,一些针对文件的增删、安全、请求等功能都提供了较为完善的支持,也都是可以在S3的控制台里直接配置(登陆账号后,顶部的导航栏里可以进入) PS:提供一个比较偏门的方法,英语不好的同学,Amazon的功能好多术语不懂的话,可以去国内比较出名的云平台看文档,比如阿里云,因为国内的基本上都是模仿和抄袭Amazon的云,提供的功能
2015-10-31 11:24:38 259746 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人