- 博客(4)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Webmagic+Redis+Queue+Scheduled案例分析
案例介绍 由于公司项目需求，我初次接触了Webmagic，一款java爬虫框架，WebMagic的结构分为Downloader、PageProcessor、Scheduler、Pipeline四大组件，并由Spider将它们彼此组织起来，可以帮助你快速开发出一个高效、易维护的爬虫。公司项目系统欲实现通过定时任务Scheduled全量爬取车型报价，车型报价可以通过易车网等网站爬取，...
2018-09-20 23:25:57
3263
原创 TCP协议简单讲解
TCP协议TCP（Transmission Control Protocol 传输控制协议）是一种面向连接的、可靠的、基于字节流的传输层通信协议。 TCP包头格式 首先，源端口号和目标端口号是不可少的，端口号的存在，数据就知道应该发给哪个应用。 接下来是包的序号，编号是为了解决数据发送乱序问题，不编号确认不了哪个先来，哪个后到。 还有就是确认序号，发出去的包应该有确认，如果...
2018-09-19 22:55:24
212
原创 Mysql索引结构的实现
什么是索引 索引（Index）是帮助数据库高效获取数据的数据结构。索引是在基于数据库表创建的，它包含一个表中某些列的值以及记录对应的地址，并且把这些值存储在一个数据结构中。最常见的就是使用哈希表、B+树作为索引。Mysql索引的数据结构：B+Tree 一般来说，索引本身也很大，不可能全部存储在内存中，因此索引往往以索引文件的形式存储在磁盘上。这样的话，索引查找过程...
2018-09-07 23:39:51
7176
原创 Java面试常见知识点
基本语法static、final、java内部类、transient、volatile关键字的作用，foreach循环的原理 ①static表示“全局”或者“静态”的意思，用来修饰成员变量和成员方法，也可以形成静态static代码块，甚至静态导包（静态导包就是java包的静态导入，用import static代替import静态导入包是JDK1.5中的新特性）。 被static修饰的成员变...
2018-09-02 01:33:27
1631
WebSocket、Webmagic转正技术点分享与汇报.ppt
2020-03-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人