- 博客(20)
- 资源 (52)
- 收藏
- 关注
RSS订阅原创 kudu常用命令
https://www.cnblogs.com/starzy/p/10573508.html1.建表语句create TABLE kudu.default.my_first_table(id BIGINT WITH (primary_key = true),name varchar)WITH (number_of_replicas = 3,partition_by_hash_buckets = 2,partition_by_hash_columns = ARRAY[‘id’],partit
2020-10-23 10:10:12
2195
原创 hdfs常用命令
https://blog.csdn.net/QMW19910301/article/details/83502459一般以hadoop fs 操作hdfshdfs***hdfs dfs -ls /hdfs默认的块大小是64MB还是128MB呢？查看Hadoop官网，可以看到，block size之前是64MB的，从2.7.3版本开始，block size的大小就由64MB变成了128MB，因为块越大，寻址时间越短。1.-ls功能：显示目录信息示例： hadoop fs -ls hdfs://
2020-10-23 10:08:27
308
原创 spark基础
中文字符用utf-8编码占用3个字节(bit)，GBK、GB2312收编的汉字占2个字节(bit)，严格地用iso8859-1无法表示汉字，只能转为问号ASCII 英文一个字节gb2312，gbk 中文两个字节，英文一个字节在中文系统中ansi一般指gb2312或gbkGB2312、GBK都属于双字节字符集 (DBCS)Utf-8 中文三个字节，英文一个字节Unicode 中文两个字节，英文两个字-------------------hadoop start -----------------
2020-10-23 10:06:08
236
原创 scala基础
Scala 与 Java 的最大区别是：Scala 语句末尾的分号 ; 是可选的。:paste// Entering paste mode (ctrl-D to finish)scala中class与object区别calss scala编译器会字段帮我们生产一个私有字段和2个公有方法get和setscala 中没有 static 关键字，所以 对于一个class来说，所有的方法和成员变量在实例被 new 出来之前都是无法访问的因此在class中的main方法没什么用了scala 的o.
2020-10-23 10:02:33
199
原创 docker常用命令
教程https://www.runoob.com/docker/docker-hello-world.htmldocker中怎样设置开机启动–随容器的启动而启动服务？https://www.cnblogs.com/yougewe/p/10425387.html★★★★★★如何备份当前容器的修改？备份是可靠性的一个保证！ start★★★★★★1.如何备份当前容器的修改？备份是可靠性的一个保证！ 1. 使用commit 命令保存到本地docker commit -m “msg” abcommit
2020-10-23 10:01:24
628
1
原创 es
集群搭建https://blog.csdn.net/sinat_26594945/article/details/1026458981.创建索引put localhost:9200/commodity{“settings”: {“number_of_shards”: 3,“number_of_replicas”: 2},“mapping”: {“_doc”: {“properties”: {“commodity_id”: {“type”: “long”},“commodity_n
2020-10-23 10:00:33
225
原创 flink基础
1.任何程序都是需要有输入、处理、输出，Flink专业术语对应Source，map，Sink。提到Flink程序的时候，我们会有Source数据源，然后map其实就是对输入的数据处理的意思，接着Sink就是落地数据，也就是我们存储数据到什么地方。2.将核心数据处理接口分为两大类，一类是支持批计算的接口DataSet API，另外一类是支持流计算的接口DataStream API3.Flink窗口：窗口分类可以分成：翻滚窗口（Tumbling Window，无重叠），滑动窗口（Sliding Windo
2020-10-23 09:59:47
334
1
原创 git常用命令
1.查看所有分支git branch -a2.查看当前使用分支(结果列表中前面标*号的表示当前使用分支)git branch3.切换分支git checkout 分支名4.git stash （这是将本地代码回滚值至上一次提交的时候，就是没有你新改的代码）5.git pull origin dev（将远程的拉下来）6.git stash pop（将第一步回滚的代码释放出来，相等于将你修改的代码与下拉的代码合并）然后解决冲突，你本地的代码将会是最新的代码7.git add .8.git
2020-10-23 09:58:34
283
原创 go常用命令
0.Go Bulid 命令a.打包成exe后缀文件，在windows上可以直接运行,首先，进入到main.go文件目录下，执行以下命令 go build main.go-o 参数可以指定输出目录与打包后的文件名 go build -o gotest main.gob.打包成二进制文件，可以在linux平台运行首先，进入到main.go文件目录下，执行以下命令set CGO_ENABLED=0set GOARCH=amd64set GOOS=linux GOOS指的是目标操作系统，支
2020-10-23 09:55:32
369
原创 hbase简介
hdfs***hdfs dfs -ls /------------------------------基础-------------------------------------------------HDFS是分布式文件存储系统，核心功能就是为用户提供更加稳定合理的文件存储方式。Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。HBase是Hadoop的数据库，一个分布式、可
2020-10-22 17:12:27
285
1
原创 hbase-phoenix常用命令
1.Phoenix链接hbase sqlline.py cdh01,cdh02,cdh03 sqlline.py hadoop01,hadoop02,hadoop03,hadoop04,hadoop05相关操作语法https://blog.csdn.net/u010916338/article/details/80309513按天数取每天的最大select parkid,parkname,malenum,mennum,timestateid, DATE_FORMAT(from
2020-10-22 17:09:36
1537
原创 hive常用命令
1.设置显示schemahiveset hive.cli.print.header=true;2.set mapred.reduce.tasks=100; 查看set mapred.reduce.tasks;3.（1）启动hivehive (bin/hive)（2）查看数据库show databases;（3）打开默认数据库3use default;（4）显示default数据库中的表3show tables;（5）创建一张表3create table student(id in
2020-10-22 17:02:01
928
原创 idea常用命令
单行注释（行首） ctrl + /段落注释 ctrl + shift + /生成get/set方法 alt + insert 再选择 getter and setteridea格式化代码快捷键：Ctrl+Alt+L撤销/恢复 ctrl + Z / ctrl + shift + Z新增/删除行 ctrl + D / ctrl + Xdebug模式，查看变量值，alt + F8debug模式，F7下一步，F9跳过当前断点接口方法进入实现类方法 CTRL+ALT+Bdebug断点，查看.
2020-10-22 17:00:42
602
原创 kafka常用命令
集群搭建https://www.cnblogs.com/linyouyi/p/11369015.htmlOnly one of --bootstrap-server or --zookeeper must be specified–bootstrap-server spark01:9092–zookeeper spark01:2181创建topicbin/kafka-topics.sh --create --bootstrap-server spark01:9092 --replication-f
2020-10-22 16:59:55
2293
原创 linux常用命令
1.window1占用查询端口的pid查询C:\Users\helloworld>netstat -ano|findstr “9989”window1关闭对应pidC:\Users\helloworld>taskkill -F -PID 6832成功: 已终止 PID 为 6832 的进程。2.刷新windows DNS 解析缓存ipconfig /flushdns3.windows查看域名映射ipnslookup yun.fangte.com4.windows ping端口
2020-10-22 16:56:42
651
原创 mongodb常用命令
集群搭建https://blog.csdn.net/kevinmcy/article/details/827120741.创建空文件注意点将mkdir替换为touch，仅限创建空的文件touch -p /home/mongodb/log/config.logtouch -p /home/mongodb/log/mongos.logtouch -p /home/mongodb/log/shard1.logtouch -p /home/mongodb/log/shard2.logtouch -p
2020-10-22 16:54:34
198
原创 mysql常用命令
-------------------linux环境mysql安装--------------------------------------------wget安装mysql的过程https://www.cnblogs.com/opsprobe/p/9126864.htmlUbuntu18.04下安装MySQL提示：以下操作均在root权限下进行。Ubuntu重启mysqlsudo /etc/init.d/mysql startsudo service mysql start查看有没有安装
2020-10-22 16:53:34
462
原创 presto常用命令
presto安装https://blog.csdn.net/qq_25073261/article/details/107402176Presto常用语句https://blog.csdn.net/lnho2015/article/details/51428782/bin/launcher start 后台运行bin/launcher run 前台运行1.查询从0或多个表获取数据行[ WITH with_query [, ...] ]SELECT [ ALL | DISTINCT ] se
2020-10-22 16:50:07
3695
原创 redis常用命令
---------------常用命令--------------------------------------redis集群的端口号cdh01:7000，7001 cdh02:7002，7003 cdh03:7004，7005redis-cli -h cdh02 -c -p 7002 -a redis123TTL KEY_NAME当 key 不存在时，返回 -2 。 当 key 存在但没有设置剩余生存时间时，返回 -1 。 否则，以秒为单位，返回 key 的剩余生存时间。注意：在 Red
2020-10-22 16:36:07
582
原创 大数据知识
★★柯里化是将原先一次性接受的参数，改成了链式接受的形式def mul(x: Int)(y: Int) = x * y //定义柯里化函数mul(6)(7) //调用柯里化函数★★★★★★不能将RDD广播出去，RDD不存数据，可以将RDD的结果广播出去，rdd.collect()但是DataFrame和变量可以直接广播，因为DataFrame不一定是分布式的，他提供了islocal方法，它收集数据创建本地对象，然后广播它。广播变量只能在Driver定义，因为SparkContext没有被序列化
2020-10-22 16:24:21
1395
azkaban已编译后的tar.gz包azkaban3.90_tar_gz.zip
2020-07-23
azkaban已编译后的zip包azkaban3.90.zip
2020-07-23
gradle-4.6-all组件.zip
2020-07-23
confluent实时同步sqlserver数据debezium-connector-sqlserver.zip
2020-03-20
websocket前端Demo.zip
2019-09-06
xshell与xftp多开窗口.zip
2019-09-06
shell之demo示例+学习指南
2017-06-13
Git安装包及下载安装说明
2017-06-12
MUI中文文档及包含demo
2017-06-05
MUI开发初学demo
2017-06-05
cdh6.3.2集成flink1.12.0所需要的编译好的包
2022-08-12
excel(xls或xlsx)便捷copy及poi操作demo.rar
2022-04-11
hdp集群从0到1搭建
2022-04-03
spire.xls.free-2.2.0.rar
2022-03-31
docker_hue_arm64.zip
2021-09-16
MobaXterm_Portable_v11.0_cracked.zip
2020-10-26
kudu与hbase组成底层图解.zip
2020-10-22
springboot集成phoenix/presto/tidb/redis各模式等组件demo.zip
2020-04-14
perl连接mysql或者oracle生成java实例perlCreateJavaClass.exe
2020-04-13
zabbix监控安装\预警\监控数据库等文档.docx
2020-01-20
HTMLTestRunner_PY3.zip
2019-11-08
mqtt前端客户端Demo.zip
2019-10-31
Spark2.2Doc API 中文参考文档
2019-09-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人