小小博客

Web倒是可以给梦想者一个启示,你能够拥有梦想,而且梦想能够实现,网络是离你梦想最近的地方!...

对"瑶瑶代理IP"的爬取存取MySQL

前因 过分的西刺代理网站,对于爬虫早已写好,只待代理IP数据进入我的MySQL服务器中,可以无奈访问IP被封,所有转向了另一个代理IP网站—-瑶瑶代理IP。 配置 针对爬虫数据库操作主要在settings.py和pipelines.py文件中,前者进行配置,后者进行操作。注意的是代码中设计数...

2018-02-23 21:26:53

阅读数 366

评论数 0

对"西刺免费代理IP"爬取、测试并存入MySQL

前言 学习scrapy有一段时间了,但是对了笔记的总结并没有跟上步伐,这个案例是视频教程多次给出的,但是在此进行总结和学习,提高学习效率。 由于网站结构发生改变,这篇文章的代码也随之发生改变。 Python网络爬虫实战 Scrapy 注:b站真是个好地方。 思路 对了需求无非进行下面的...

2018-02-23 16:44:24

阅读数 1137

评论数 0

scrapy文档案例源码

前言 针对http://quotes.toscrape.com/进行爬取的源码案例,方便学习和研究。 CSS提取 # -*- coding: utf-8 -*- import scrapy class ToScrapeCSSSpider(scrapy.Spider): nam...

2018-02-19 20:55:10

阅读数 150

评论数 0

scrapy基础入门

前言 闲来无事捣腾了python爬虫,发现scrapy入门不错,虽然暂时对xpath和css的操作不是太了解。但是简单的爬虫还是挺好写的。 扩展 scrapyd可以部署多个scrapy爬虫,能够在网页端查看正在执行的任务,也能新建爬虫任务,和终止爬虫任务,功能比较强大。 安装 p...

2018-02-19 20:41:44

阅读数 131

评论数 0

xpath基础学习

前言 偶然看见python的scrapy框架,由于兴趣的吸引,最近如入门式的学习,在学习过程中遇到了xpath的相关知识,在此进行总结方面日后查询和记忆。 参考: 菜鸟教程 理解 XPath是一门在 XML 文档中查找信息的语言。当然也可以运用于HTML。在scr...

2018-02-19 13:54:25

阅读数 124

评论数 0

JavaScript 俄罗斯方块源码

来自黑马的教程源码,虽然都能看懂,但是理解和学习却是困难滴。 来自CSDN的教程 <html> <head> <style> ...

2018-02-16 12:09:10

阅读数 104

评论数 0

游戏破解思路

游戏破解思路 最近在家无聊玩了玩微信小游戏,结果发现大神们写了破解游戏的python脚本(看样子还是喜欢我python),基于目前基础不牢、水平不够、时间不足(编不下去了。。。。)的综合原因,特意记录游戏破解的原理方便日后对问题的分析和理解。 此次记录的最近较火的三款游戏,分别是旅游青蛙、跳一...

2018-02-03 22:14:19

阅读数 3652

评论数 0

基本数据结构及代码实现系列

基本数据结构及代码实现系列 对于一个即将成为一名热爱技术的程序员来说,数据结构无非相当于武功秘籍的内功,在者对于接下来的一系列学习中都会起着潜移默化的影响,因此笔者决定总结所学的数据结构中的常用代码实现部分。 注:代码来源于《数据结构及其C语言实现》 李少辉主编_北京:北京邮电大学出版社 方便...

2018-02-01 17:43:29

阅读数 168

评论数 0

java JDBC连接mysql数据库

java连接数据库的学习笔记,我不得不承认java代码的繁杂。

2017-12-20 13:54:53

阅读数 176

评论数 0

python爬虫系列(一)百度首页爬取

经受不住爬虫技术的吸引,为此决定踏入”爬虫”这条不归路。 其实在我眼里,爬虫无非所见即所得,也就是一切皆可爬。至于url技术和python环境在此就不重复。在此使用urllib库进行初步学习。

2017-12-19 10:25:16

阅读数 6497

评论数 2

MyEclipse创建自定义HTML5,JSP模板

我们知道在MyEclipse里面编写的html和jsp模板并不符合html5的规范,对于有强迫症的我决定更改默认设置。

2017-12-18 16:58:32

阅读数 1873

评论数 0

JavaScript的内置函数

我们能够理解的是JavaScript的内置函数对于日常编程的重要性,因此进行熟练的掌握至关重要。 (当然有些没多大重要)

2017-12-10 11:14:12

阅读数 148

评论数 0

JavaScript之for ... in

for…in 语句 功能:for…in 语句用于遍历数组或者对象的属性(对数组或者对象的属性进行循环操作)。 遍历数组 代码实现: var arr = ["PHP","Python","J...

2017-12-10 10:07:44

阅读数 73

评论数 0

华为命令配置专题

华为命令配置专题学习网络的同学都能明白,思科视乎一家独大,但是在发展的潮流中华为也紧跟不舍,所以对于我们学习华为命令的配置也变得重要了。 简介华为虽然对于交换机、路由器的配置和思科不大相同,但是我们能够理解的是不同的只是形式,其内部协议、原理也不过尔尔而已。 (针对此配置笔者了解甚少,多看书中...

2017-11-04 20:43:49

阅读数 1962

评论数 0

配置广域网接入

如果想访问其他远程网络,就必须是个广域网(WAN)接入服务了。

2017-11-04 17:39:38

阅读数 225

评论数 0

策略路由

在我认为策略路由是一种强化控制方式,就默认而言直接路由、静态路由、默认路由和各种动态协议所生成的路由条目,路由器远可以将数据分组从其源地址转发到目的地址。 但是人们的强权意识觉得这远远是不够的,因此策略路由(Policy Based Routing,PBR)就用来对分组的转发和路由的传播进行精准...

2017-11-04 17:38:49

阅读数 158

评论数 0

IPSec的相关配置

我们能够理解IPSec(IP Security)是用于增强IP网络的安全性,因此请务必重视它。同时历年的考点也说明了这一点。

2017-11-04 17:37:47

阅读数 162

评论数 0

IPv6配置与部署

由于从IPv4向IPv6过渡是大势所趋,因此就目前学习IPv6来说可谓明智之举。

2017-11-04 17:37:07

阅读数 841

评论数 0

访问控制列表ACL

为什么需要ACL,无非是进行访问控制罢了。这种技术从路由器逐步推广到交换机上进行使用。

2017-11-04 17:35:43

阅读数 673

评论数 0

路由器的基本配置

路由器的基本配置路由器是网络异种网络互联与多个子网互联的重要设备。简单来说,路由器可以将不同的局域网进行互联和通信。

2017-11-04 17:34:36

阅读数 1805

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭