chouhuzong2928-CSDN博客

转载 NIO和传统IO之我见

传统的socket IO中，需要为每个连接创建一个线程，当并发的连接数量非常巨大时，线程所占用的栈内存和CPU线程切换的开销将非常巨大。使用NIO，不再需要为每个线程创建单独的线程，可以用一个含有限数量线程的线程池，甚至一个线程来为任意数量的连接服务。由于线程数量小于连接数量，所以每个线程进行...

2017-01-22 16:51:00 81

转载 HttpClient 使用代理完全版本

import com.unionpay.spiderframework.spiderframework.common.util.Config; import org.apache.commons.io.IOUtils; import org.apache.http.*; import org....

2017-01-11 17:49:00 123

转载 HashSet基本操作

** 1.HashSet的添加时的去重机制 ** **1.1 **重要:需要去重的对象必须做到覆盖Object的equals和hashcode方法,具体实现需要根据业务场景来定. **1.2 **HashSet 会首先调用 obj 的 hasCode 方法得到该对象的哈希码,HashSet 会...

2016-11-25 16:55:00 190

转载 Scrapy爬取知乎用户信息以及人际拓扑关系

Scrapy爬取知乎用户信息以及人际拓扑关系 1.生成项目 scrapy提供一个工具来生成项目，生成的项目中预置了一些文件，用户需要在这些文件中添加自己的代码。打开命令行，执行：scrapy startproject tutorial，生成的项目类似下面的结构 tutorial/ ...

2016-09-27 17:36:00 491

转载 WebMagic源码分析

Webmagic ##1. WebMagic概览 WebMagic项目代码分为核心和扩展两部分。核心部分(webmagic-core)是一个精简的、模块化的爬虫实现，而扩展部分则包括一些便利的、实用性的功能。WebMagic的架构设计参照了Scrapy，目标是尽量的模块化，并体现爬虫的功能特点...

2016-09-09 11:15:00 244

转载 java快速排序

/** * Created by huazi on 16/8/8. */ public class KSPX { public static void main(String[] args) { int Array[] = {1, 22, 5, 7, ...

2016-08-08 15:33:00 61

转载 java克隆须知

public class A implements Cloneable { public B b; public A() { b = new B(); } public Object clone() { A o = null;...

2016-07-28 16:12:00 82

转载 Python学习笔记（一）

Python学习笔记（一）下载与环境配置下载链接 https://www.python.org/downloads/ 有2.7.11和3.1.5两个最新版本供下载，windows，linux，mac操作系统按个人系统选择相应的下载链接 2.7.11和3.1.5两个最新版本的差异 ...

2016-05-26 17:45:00 84

转载 Markdown 学习

##下面为大家Markdown的入门教程 ## Markdown简介 Markdown 是一种轻量级标记语言，创始人为约翰·格鲁伯（John Gruber）。它允许人们“使用易读易写的纯文本格式编写文档，然后转换成有效的XHTML(或者HTML)文档”。[1]这种语言吸收了很多在电子邮件...

2016-05-25 16:18:00 110

chouhuzong2928的博客