- 博客(8)
- 收藏
- 关注
RSS订阅转载 学习用java基于webMagic+selenium+phantomjs实现爬虫Demo爬取淘宝搜索页面
团队的技术栈以java为主，并且我的主语言是Java，研究时间不到一周。基于以上原因固放弃python，选择java为语言来进行开发。等之后有时间再尝试python来实现一个。 本次爬虫选用了webMagic+selenium+phantomjs，选用他们的原因如下： webMagic(v:0.73)，一个轻量级的Java爬虫框架(git地址：https://git
2018-01-22 15:03:57
1139
转载 Kafka安装
Step 1: 下载Kafka tar -xzf kafka_2.9.2-0.8.1.1.tgz cd kafka_2.9.2-0.8.1.1 Step 2: 启动服务Kafka用到了Zookeeper，所有首先启动Zookper，下面简单的启用一个单实例的Zookkeeper服务。可以在命令的结尾加个&符号，这样就可以启动后离开控制台。 bin/zookeeper-ser
2017-12-29 10:46:22
252
转载 common-pool2连接池详解与使用
common-pool2连接池详解与使用 我们在服务器开发的过程中，往往会有一些对象，它的创建和初始化需要的时间比较长，比如数据库连接，网络IO，大数据对象等。在大量使用这些对象时，如果不采用一些技术优化，就会造成一些不可忽略的性能影响。一种办法就是使用对象池，每次创建的对象并不实际销毁，而是缓存在对象池中，下次使用的时候，
2017-11-08 09:53:51
932
转载 Java NIO 概述
Java NIO系列教程（一） Java NIO 概述 原文链接 作者：Jakob Jenkov 译者：airu 校对：丁一Java NIO 由以下几个核心部分组成：ChannelsBuffersSelectors虽然Java NIO 中除此之外还有很多类和组件，但在我看来，Channel，Buffer 和 Selector 构成了核心的A
2017-10-07 16:54:14
361
转载 JAVA多线程(第一天 )
5天不再惧怕多线程——第一天 尝试Thread 用到多线程时才发现自己对多线程的了解少之又少，仅仅停留在lock上面，故这几天看了下线程参考手册结合自己的心得整理一下放在博客上作为自己的学习笔记。 好了，我们知道“负载”是一个很时尚，很牛X的玩意，往大处说，网站需要负载，数据库需要负载。往小处说，线程也需要负载，面对海量的用户请求，我们的单线程肯定扛不住，
2017-08-28 16:04:22
258
转载 common-pool2连接池详解与使用
我们在服务器开发的过程中，往往会有一些对象，它的创建和初始化需要的时间比较长，比如数据库连接，网络IO，大数据对象等。在大量使用这些对象时，如果不采用一些技术优化，就会造成一些不可忽略的性能影响。一种办法就是使用对象池，每次创建的对象并不实际销毁，而是缓存在对象池中，下次使用的时候，不用再重新创建，直接从对象池的缓存中取即可。为了避免重新造轮子，我们可以使用优秀的开源对象池化组件apache-com
2017-08-01 18:02:15
2184
转载 http协议
http协议学习系列1. 基础概念篇1.1 介绍 HTTP是Hyper Text Transfer Protocol（超文本传输协议）的缩写。它的发展是万维网协会（World Wide Web Consortium）和Internet工作小组IETF（Internet Engineering Task Force）合作的结果，（他们）最终发布了一系列的RFC，RFC 1945定义
2017-07-17 17:17:27
1865
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人