![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
weixin_41744018
这个作者很懒,什么都没留下…
展开
-
kafka常用命令
发现一个月前写的kafka程序找不见了,而且感觉kafka的命令也像完全重新接触一样,看来还是要多做总结吧,需要消化式的记忆,应用,负责稍微一段时间没用,就全都忘了。 常用命令 使用的都是kafka的bin目录下的命令,kafka-server-start.sh启动,kafka-topic.sh主题topic命令,kafka-console-producer.sh生产者命令,kafka-console-consumer.sh消费者命令,然后需要指定kafka集群的连接地址,指定topic,这个指定集群地址通原创 2022-01-06 10:41:11 · 44 阅读 · 0 评论 -
elasticsearch
学习资料 参考:知乎的学习资料原创 2021-12-28 15:54:43 · 739 阅读 · 0 评论 -
hbase介绍
主要参考: 1.hbase介绍1 2.hbase介绍2 简单总结 主要需要明白hbase存储的模式, 1.存储的数据没有类型的概念,都是以Bytes存储,这就是为什么java api里边需要取出来的时候:Bytes.toString,写入的时候Bytes.toBytes() rowkey 2.通过{row key,column(=< family> + < label>),version} 唯一确定的单元, 1)通过单个 Row Key 访问。 2)通过 Row Key 的 rang原创 2021-12-26 14:58:48 · 1112 阅读 · 0 评论 -
hbase java api
引用:hbase java api接口列表原创 2021-12-25 19:50:49 · 1283 阅读 · 0 评论 -
java spark命令行执行参数
java命令行 java -jar jar包位置 参数1 参数2 java -cp jar包位置 主类(com.XXX.XX) 参数1 参数2 java -cp /home/dataworks-1.0.0-jar-with-dependencies.jar com.casic304.dataworks.core.MyTest /home/columnRename.json spark命令行运行 spark-submit --master (local本地运行,spark://host:port, y原创 2021-12-24 14:38:00 · 862 阅读 · 0 评论 -
hdfs常用命令
命令样式 命令头 hadoop fs hdfs dfs 两个开头是一样的 命令内容 接下来是,-ls、-put、-mkdir、-get、-rm、-mv、-chmod、-cat等命令 后边跟着文件,hdfs文件的目录是这样的 地址路径 hdfs://host:port/home/ port一般是9000 如果是put,第一个是hdfs地址,第二个是本地文件位置 安全模式等其他命令 ...原创 2021-12-24 10:23:48 · 390 阅读 · 0 评论 -
ssh免密登陆
#生成秘钥 ssh-keygen -t rsa “ssh-keygen”通过参数“-t”指定加密算法,这里的参数rsa表示采用RSA加密算法。RSA加密算法是一种典型的非对称加密算法,它基于大数的因式分解这种数学难题,是引用最广泛的非对称加密算法之一。([https://blog.csdn.net/qq_36384657/article/details/105392564]); 一路回车即可, #生成公钥分发 ssh-copy-id 地址 地址对应的是要免密登陆的主机,可以是自己也可以是远程主机。 #是否配原创 2021-12-24 10:02:29 · 306 阅读 · 0 评论