自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

徐志的博客

专注于spark和数据分析等大数据

  • 博客(3)
  • 资源 (5)
  • 收藏
  • 关注

原创 spark概念详解以及四大核心介绍!!!

Spark特点:大数据分布式计算框架,内存计算分布式计算内存计算 中间结果在内存 迭代容错性多计算范式四大核心扩展功能: Spark SQL:Sql on hadoop系统,提供交互式查询、能够利用传统的可视化工具 在Spark上进行类似SQL的查询操作,报表查询等功能 GraphX:图计算引擎,大规模图运算,pagerank MLlib:聚类分类 分类 推荐 等机器学习算法*Applicatio...

2018-06-19 15:12:17 7429

原创 spark的一些难以理解的概念和一些知识点的解读(高频考点!!)(Unit1)

这篇文章是对于还没有入门和刚刚入门的spark小白提的,大佬可以给出意见,本人接受!!!关于RDD部分,首先你要知道什么什么RDDRDD字面意思就是弹性分布式数据集。。。。。。。(百度一下都是这种字眼很让人反感)个人感觉应该要分开理解1。弹性             1. RDD可以在内存和磁盘之间手动或自动切换(后续会仔细讲解)            2. RDD可以...

2018-06-12 16:49:21 4026 1

原创 小白spark学习感悟 AND spark两大版本的比较!!!

Spark2.x 与 Spark1.x 关系Spark2.x 引入了很多优秀特性,性能上有较大提升,API 更易用。在“编程统一”方面非常惊艳,实现了离线计算和流计算 API 的统一,实现了 Spark sql 和 Hive Sql 操作 API 的统一。Spark 2.x 基本上是基于 Spark 1.x 进行了更多的功能和模块的扩展,及性能的提升。Spark2.x 新特性1). SparkCo...

2018-06-04 20:18:09 9217 1

ip地址解析库

里面放的是我解析IP地址调用的库,使用这个库直接可以根据IP地址查看对应的城市信息

2018-11-11

hadoop权威指南的源码

一共十几章的案例代码,这里面放的都是hadoop权威指南的代码案例,和所需要的数据,有需要的可以下载

2018-10-14

一个很牛逼的spark项目连接

这个项目涵盖了javaweb和大数据生态圈的一些技术,对从共享单车的初始页面和充值页面和扫码页面进行讲述,通过大数据技术对车子进行定位和推荐很全的一个项目

2018-10-10

本人的spark项目代码以及数据,请下载查看

这个里面装的是本人写的一个关于广告精准投放的一个spark项目,实现语言的是scala,然后里面有代码和注释,还有需要的操作的日志文件,东西很齐全

2018-10-10

mysql的jar

里面放的是MySQL的jar包有需要的可以下载然后要是吗没有积分可以在以下网址留言qq邮箱 !!!!必回你必回你!!!!!

2018-06-11

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除