自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(27)
  • 收藏
  • 关注

转载 存储过程语法

存储过程:https://blog.csdn.net/weixin_33709364/article/details/92417839

2021-01-07 13:04:23 8

转载 GL-总账

EBS总账(GL)模块常用表select * from gl_sets_of_books 总帐select * from gl_code_combinations gcc wheregcc.summary_flag=‘Y’ 科目组合select * from gl_balances 科目余额select * from gl_je_batches 凭证批select * from gl_je_headers 凭证头select * from gl_je_lines 凭证行select *

2020-12-08 10:09:52 15

原创 http 转译

:替换为%3A+URL 中+号表示空格 %2B空格 URL中的空格可以用+号或者编码 %20/ 分隔目录和子目录 %2F? 分隔实际的 URL 和参数 %3F% 指定特殊字符 %25#表示书签 %23& URL 中指定的参数间的分隔符 %26= URL 中指定参数的值 %3D...

2020-10-14 16:56:18 20

转载 docker命令

docker 的导入与导出参考地址:https://blog.51cto.com/13520761/24760271)导出容器 [root@localhost ~]# docker export d9d6240dffe1 > /tmp/ubuntu.tar2)导入容器快照(从快照文件中导入为镜像,以下实例将快照文件ubuntu.tar导入到镜像test/ubuntu:v1) [root@localhost ~]# docker import /tmp/ubuntu.tar te

2020-10-10 10:54:37 4

原创 springboot整合elasticsearch启动时报错

先贴下报错信息***************************APPLICATION FAILED TO START***************************Description:An attempt was made to call a method that does not exist. The attempt was made from the following location: org.springframework.boot.autoconfigu

2020-05-27 10:48:40 93

原创 SpringBoot中Cache缓存的使用

今天学习了一个项目的caheManage+spring data redis ,太棒了!SpringBoot中Cache缓存的使用:https://blog.csdn.net/weixin_36279318/article/details/82820880

2020-05-03 16:24:36 70

转载 Redis常用命令

一、基本操作命令redis默认为 16个库 默认自动使用 0号库1. 检测Redis服务运行是否正常redis >ping #返回 PONG,表示redis服务运行正常2.查看当前数据库中 key的数目:dbsize3. 切换库命令:redis> select dbNum #例如:切换到5号数据库 则输入 select 54.删除当前库的数据:flushdb。...

2020-04-24 09:39:45 51

转载 Git命令

查看、添加、提交、删除、找回,重置修改文件git help <command> # 显示command的help git show # 显示某次提交的内容 git show $id git co -- <file> # 抛弃工作区修改 git co . # 抛弃工作区修改 git add <file> # 将工作文件修改提交到本地暂存区 g...

2020-04-23 13:33:33 31

原创 zookeeper管理kafka中offset

之前参考过一篇论文,忘记出处了,有作者看到,请联系我import com.cpic.spark.KafkaPropertiesimport org.apache.curator.framework.CuratorFrameworkFactoryimport org.apache.curator.retry.ExponentialBackoffRetryimport org.apache.k...

2020-04-20 09:53:27 195

转载 mybatis设置

<settings> <setting name="cacheEnabled" value="true"/> <setting name="lazyLoadingEnabled" value="true"/> <setting name="multipleResultSetsEnabled" value=...

2020-04-16 14:28:45 22

原创 Zookeeper 节点的简单练习

1.启动zkServer.shsh zkServer.sh2.启动zkCli.sh3.创建节点传建节点命令:create -s -e path data-s 有序节点 ~~~~~~~~~~~~~~~~~~ 对应 一般节点-e 临时节点 退出连接后就会消失 ~~ 对应 持久化节点4.查看数据5.查看节点信息...

2020-04-14 15:06:50 23

转载 @Transient

在实际开发过程中,我们常常会遇到这样的问题,这个类的有些属性需要序列化,而其他属性不需要被序列化,打个比方,如果一个用户有一些敏感信息(如密码,银行卡号等),为了安全起见,不希望在网络操作(主要涉及到序列化操作,本地序列化缓存也适用)中被传输,这些信息对应的变量就可以加上transient关键字。换句话说,这个字段的生命周期仅存于调用者的内存中而不会写到磁盘里持久化。transient使用小结...

2020-04-11 22:32:09 30

原创 Scala语言的简单练习

巩固下基础,练习下mapforeachzippartitionfindflatmap : map后将结构展开flatten :将结构展开object ScDemo3App { def main(args: Array[String]): Unit = { val list = List(1,2,3,4,5,6,7,8,9)// list.map(x =&...

2020-04-11 14:23:22 95

转载 Centos7开机之后连不上网ens33mtu 1500 qdisc noop state DOWN group default qlen 1000

解决、先停止网卡,设置disable,然后启动,发现网卡启动了[root@es1 es]# systemctl stop NetworkManager[root@es1 es]# systemctl disable NetworkManagerRemoved symlink /etc/systemd/system/multi-user.target.wants/NetworkManager....

2020-04-10 09:33:31 237

转载 Kafka为什么速度快

https://www.cnblogs.com/binyue/p/10308754.html

2020-04-06 21:08:38 20

转载 Cmder--Windows系统神器

参考文章:https://www.jianshu.com/p/5b7c985240a7贴下快捷键Tab 自动路径补全Ctrl+T 建立新页签Ctrl+W 关闭页签Ctrl+Tab 切换页签Alt+F4 关闭所有页签Alt+Shift+1 开启cmd.exeAlt+Shift+2 开启powershell.exeAlt+Shift+3 开启powe...

2020-04-04 14:36:05 43

原创 Spark测试代码时,去掉无用的日志

废话不多说import org.apache.log4j.{Level, Logger}import org.apache.spark.internal.Loggingobject SomeTest extends App with Logging { Logger.getRootLogger.setLevel(Level.WARN) }继承Logging这样打印的就是我...

2020-03-31 17:07:10 226

转载 Scala中Option/Some/None

https://www.jianshu.com/p/95896d06a94d为了让所有东西都是对象的目标更加一致,也为了遵循函数式编程的习惯,Scala鼓励你在变量和函数返回值可能不会引用任何值的时候使用Option类型。在没有值的时候,使用None,这是Option的一个子类。如果有值可以引用,就使用Some来包含这个值。Some也是Option的子类。def showCapital(x: ...

2020-03-31 16:41:23 24

原创 YARN的执行流程概述

流程:1.ResourceManager接收Client的执行请求,并为此请求在指定的NodeManager上分配一个Container,运行ApplicationMaster2.AplicationMaster再向ResourceManager申请资源,ResourceManager返回资源3.ApplicationManager在其他的NodeManger上执行task,并对其进行监控...

2020-03-29 15:37:17 58

原创 为什么要使用HIVE

记录一下1.简单、容易上手(提供了类似SQL查询语言HQL)2.为超大数据集设计的计算/存储扩展能力(MR计算,HDFS存储),(ps:这部分处理的速度较慢)3.统一的元数据管理(可与Presto/Impala/SparkSQL(这三个SQL-on-Hadoop)等共享数据)最重要的是第三条,元数据中包括表的字段,类型、分区、等等...

2020-03-29 15:19:06 84

原创 HBase安装概述

1.修改conf/hbase-env.sh# export JAVA_HOME=/usr/java/jdk1.6.0/export JAVA_HOME=/root/hadoop/app/jdk1.8.0_241/# Tell HBase whether it should manage it's own instance of Zookeeper or not. export HBASE...

2020-03-29 09:19:36 39

原创 虚拟机hadoop安装配置概述

hadoop1.修改配置文件/etc/hadoop 下hadoop.env 文件修改jdk# The java implementation to use.export JAVA_HOME=/root/hadoop/app/jdk1.8.0_241core-site.xml<configuration> <property> <name&...

2020-03-28 17:43:54 57

原创 java调用虚拟机中集群的kafka遇到的一些问题

说下我遇到的一个问题,在虚拟机里使用kafka-console-consumer.sh 和 kafka-console-producer.sh 都没有问题。然后在idea中写了一个demo 消费的信息总是没有。原因是:在server.properties 中listeners=PLAINTEXT://hadoop001:9092这里用的是hadoop001,linux的机器名将这里的h...

2020-03-28 15:57:01 43

原创 Flume启动命令

方便日常查询,先记录:bin/flume-ng agent \--conf ./conf/ \-f conf/file_memory_avro.conf \-Dflume.root.logger=DEBUG,console \-n agent1-Dflume.root.logger=DEBUG,console 是将日志打印到控制台上,方便查看,也可以配置日志的路径...

2020-03-26 17:04:04 155

转载 Kafka常用命令

方便日常使用:1.kafka启动: ./kafka-server-start.sh ../config/server.properties & 2.创建topic: ./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic tes 3....

2020-03-25 14:23:37 27

转载 Linux 修改主机名 和 ip 映射关系

Linux 修改主机名 和 ip 映射关系1.修改主机名vim /etc/sysconfig/networkNETWORKING=yesHOSTNAME=hadoop2.修改主机名和IP的映射关系vim /etc/hosts192.168.0.2 hadoop001

2020-03-23 10:49:42 87

原创 spark对空值null的处理

spark对空值的处理方法: dff.show()val map = Map("age"->30l)dff.na.fill(map).show()对指定的列进行空值填充这是原本的打印信息:±—±------+| age| name|±—±------+|null|Michael|| 30| Andy|| 19| Justin|±—±------+这是...

2020-03-22 10:42:39 1822 1

空空如也

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除