boling_cavalry的博客

Java程序员的空间

IDEA开发Spark应用实战(Scala)

实战IDEA开发Scala版的Spark应用

2019-02-17 09:33:59

阅读数 33

评论数 1

docker下的spark集群,调整参数榨干硬件

调整docker-compose编排的参数,充分发挥硬件信息能运行spark集群

2019-02-16 17:04:18

阅读数 61

评论数 2

spark实战之:分析维基百科网站统计数据(java版)

在《寻找海量数据集用于大数据开发实战(维基百科网站统计数据)》一文中,我们了解了如何获取维基百科网站的网页点击量统计数据,并且介绍了数据格式的基本内容,本文以这些数据进行实战,练习基本的spark开发

2019-02-16 11:27:15

阅读数 179

评论数 0

寻找海量数据集用于大数据开发实战(维基百科网站统计数据)

在学习spark的过程中,除了经典的WrodCount例子(用于统计文本文件中的单词出现次数),我们也在寻找其他海量数据来做更多实战以提高自己,今天介绍的是一个海量数据集的下载方法,以及数据内容的简介; 关于维基百科网站统计数据 数据的下载页面地址:https://dumps.wikimedi...

2019-02-10 22:11:58

阅读数 594

评论数 1

docker下,极速搭建spark集群(含hdfs集群)

搭建spark和hdfs的集群环境会消耗一些时间和精力,今天咱们就借助docker,极速搭建和体验spark和hdfs的集群环境;

2019-02-10 01:48:23

阅读数 896

评论数 1

部署Spark2.2集群(on Yarn模式)

部署Spark on Yarn集群

2019-02-09 13:50:40

阅读数 384

评论数 2

第一个spark应用开发详解(java版)

java版的spark应用开发

2019-02-08 21:53:06

阅读数 290

评论数 0

Linux部署hadoop2.7.7集群

在CentOS7环境下,hadoop2.7.7集群部署的实战

2019-02-08 15:01:12

阅读数 322

评论数 1

Linux配置SSH免密码登录(非root账号)

设置多台linux服务器之间以非root账号的身份免密码ssh登录

2019-02-08 00:45:33

阅读数 808

评论数 0

Linux服务器端网络抓包和分析实战

本文实战了CentOS7下的网络抓包,以及windows下通过wireshark分析抓包数据

2019-02-07 17:39:14

阅读数 398

评论数 1

springboot应用查询城市天气

本文的实战是开发一个springboot应用,通过RestTemplate获取公共的远程api服务,将查询到的指定城市的天气信息返回给前端;

2019-02-07 14:42:49

阅读数 369

评论数 0

部署spark2.2集群(standalone模式)

部署spark2.2集群(standalone模式)

2019-02-04 10:04:16

阅读数 267

评论数 0

提示
确定要删除当前文章?
取消 删除