- 博客(2)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 docker搭建kafka
分布式爬虫框架的部分功能已经开发的差不多了,现在要开始考虑接入kafka了. kafka依赖于zookeeper, 所以同时需要安装zookeeper dockerfile-kafka如下 FROM java:8u111-jdk MAINTAINER stcoder RUN apt-get update RUN apt-get -y install wget
2017-11-29 22:04:34
980
原创 akka分布式爬虫框架(一)——设计思路与demo
最近在学习akka，在读了一下解析actor model的文章以及熟悉了一下官方文档的例子的后 我觉得需要一个项目来帮我进一步熟悉akka与scala编程，进过一番思索，我觉得akka可以用来 实现一个分布式爬虫框架。 设计思路 1. 依赖的库， http请求方面使用async-http-client，链接：https://github.com/AsyncHttpCli
2017-11-05 14:22:39
1524
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人