自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

李sir的博客

大数据相关技术

  • 博客(6)
  • 收藏
  • 关注

原创 Linux常用命令

Linux常用命令 $代表普通用户,#代表root用户 1.man命令(manual操作系统的简称) : 可以通过man命令查看某一个命令的使用方法 栗子: man su 查看su命令的使用方法 2.useradd : 添加用户命令 用法: useradd[选项] 用户名 栗子 : useradd Li -g<群组> 指定用户的所述群组 -G<群组&g...

2019-06-05 19:15:58 205

原创 GitHub

Git Git简介 Git是目前世界上最先进的分布式版本控制系统 Git命令操作 git log : 查看git提交日志 git reset --hard HEAD^ :回退到上一个版本,HEAD^^ 上两个版本 git reset --hard 版本号 git reflog : 记录每一次命令,去到未来 git add . :把修改后的文件加入暂存区 git commit -m '' ...

2019-06-04 20:40:48 195

原创 Kafka

Kafka 是一个分布式,支持分区的(partition),多副本的(replica),基于zookeeper协调的分布式消息系统 是一个分布式消息队列,生产者,消费者的功能 对消息保存时根据Topic进行分类,发送消息的为Producer,消息接受者为consummer,依赖于zookeeper broker:每个kafka实例 topic: partition: zookeeper:依赖集群保...

2019-06-02 21:34:07 196

原创 HBase

HBase架构: 关键词: client,zookeeper,hmaster,hregoinserver,hlog,hregoin,store,memstore,storefile,hfile hmaster:(hbase的老大) 为regoinserver分配region 负责region的重新分配 hdfs的垃圾文件回收 hregoinserver:(hbase的小弟) 负责维护...

2019-06-02 20:29:58 149

原创 快速排序

快速排序在每一轮挑选一个基准元素,并让其他比它大的元素移动到数列一边,比它小的元素移动到数列的另一边,从而把数列拆解成了两个部分。 这种思路就叫做分治法。 元素的移动 选定了基准元素以后,我们要做的就是把其他元素当中小于基准元素的都移动到基准元素一边,大于基准元素的都移动到基准元素另一边。 挖坑法: import java.util.Arrays; public class QuickSort ...

2019-06-01 09:47:28 83

原创 Spark

1.spark安装 (1)上传,解压 (2)进入conf目录并重命名并修改spark-env.sh.template文件 cd conf/ mv spark-env.sh.template spark-env.sh vi spark-env.sh 在该配置文件中添加如下配置 export JAVA_HOME=/usr/local/jdk1.8.0_152 export SPAR...

2019-06-01 08:59:07 350

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除