自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(395)
  • 资源 (4)
  • 收藏
  • 关注

原创 IDEA亮暗两种风格转换

如题,两种工具有亮暗两种风格,设置步骤如下步骤:1、打开IntelliJ IDEA,点击【File】2、点击【Settings】,或者快捷键【Ctrl+Alt+s】3、点击【Appearance & Behavior】-【Appearance】4、点击红色框中的Theme-【Darcula】(暗黑)总结:整体风格是浅黑色的,比较适合程序员在晚上敲代码(好吧,真的是个讽刺...

2018-10-11 15:15:15 1099

原创 一文读懂之python入门学习教程

python常见函数join():方法用于将序列中的元素以指定的字符连接生成一个新的字符串。str = "-";seq = ("a", "b", "c"); # 字符串序列print str.join( seq );-----------------输出a-b-c字符串截取:str='wuchengwei.blog.csdn.net'print(str[0:10])----------------输出wuchengwei遍历list集合 list = ['html', '

2020-12-12 12:07:48 195 2

原创 lombok插件生成的set/get方法不生效

目录1.Lombok是什么2.Lombok优势3.Lombok弊端4.Lombok怎样通过注解消除冗余5.lombok插件生成的set/get方法不生效?1.Lombok是什么Lombok 是一种 Java 实用工具,可用来帮助开发人员消除 Java 的冗长,尤其是对于简单的 Java 对象(POJO)。2.Lombok优势它通过注释实现这一目的。通过在开发环境中实现 Lombok,开发人员可以节省构建诸如 hashCode() 和 equals() 这样的方法以及以往用来分类各种 accesso

2020-11-03 18:52:17 298

原创 presto Query failed :Query text length exceeds the maximum length

报错信息presto Query failed :Query text length exceeds the maximum length原因分析:查询长度超过最大值解决方法:在配置文件config.properties文件里面添加query.max-length这个配置,重启presto server生效,再次尝试发现问题解决了。coordinator=truenode-scheduler.include-coordinator=falsehttp-server.http.port=80

2020-09-25 19:06:46 343

原创 java:Compilation failed:internal java compiler error

解决方案:File–>Setting…–>Build,Execution,Deployment–>Compiler–>Java Compiler

2020-08-03 16:45:59 212

原创 java:-source 1.6不支持diamond运算符

2020-08-03 16:41:16 248

原创 stack.empty()和stack.isEmpty()的区别

stack.empty()是在stack调用了父类vector的size方法stack.isEmpty()是直接调用父类vector的size方法所以,两者没有区别

2020-07-19 19:36:51 407

转载 windows无法安装到这个磁盘,选中的磁盘具有MBR分区表,在EFI系统上,windows只能安

问题描述Windows无法安装到这个磁盘。选中的磁盘具有MBR分区表。在EFI系统上,Windows只能安装到GPT磁盘。原因说明本电脑的上一个系统的磁盘分区方式采用的MBR分区表,而我们U盘安装时,驱动方式是EFI系统,EFI与之对应的是GPT分区方式,所以要么U盘驱动改为MBR,要么将磁盘分区先转换成GPT,再行安装win10.名词解释MBR—-MBR的意思是“主引导记录”,最早在1983年在IBM PC DOS 2.0中提出。之所以叫“主引导记录”,是因为它是存在于驱动器开始部分的一个特

2020-07-02 14:04:02 733

原创 Ubuntu20.04常用命令及网络配置

```下载软件: apt install xxx查看ubuntu版本号:lsb_release -a```如果出现ubuntu20.04连不上网,可以进行手动配置IP和自动获取所以最简单的方式就是自动获取执行两行命令```>dhclient>ifconfig```ok,问题解决

2020-06-16 10:13:36 844

原创 为什么会有滑动窗口?

既然我们已经有了滚动窗口,为什么还需要滑动窗口呢?也就是滑动窗口的意义是什么?那么滑动窗口和滚动窗口的区别是什么?可能有人会问那我们使用将滚动窗口长度调低不也能完成该需求吗?

2020-05-23 12:24:11 286

原创 Another MySQL daemon already running with the same unix socket. through socket mysql.sock(111)

报错信息如下:Another MySQL daemon already running with the same unix socket. ERROR 2002 (HY000): Can't connect to local MySQL server through socket mysql.sock(111)删除MySQL数据库下的mysql.sock文件重新启动service mysqld restart问题解决...

2020-05-18 23:32:24 107

原创 Kylin常见错误及解决方法

1.kylin在build报错10020拒绝链接错误2.Aggregation is not enabled. Try the nodemanager at hadoop104:423703.org.apache.hadoop.hbase.ipc.CallTimeoutException4.java.io.FileNotFoundException5.org.apache.hadoop.hbase.client.RetriesExhaustedException6.Kylin Build执行到底1

2020-05-14 21:46:55 1903

原创 kafka常见报错及解决方法

-1 could not be established. Broker may not be available解决方法:修改kafka/config/server.properties中第34行的ip地址,这里的kafka-host需要在/etc/hosts进行映射,服务端映射到本地或内网ip,客户端映射到服务端ip

2020-05-13 23:44:11 441

原创 maven打包时未打包scala程序

修改项目根目录下的pom文件在maven项目中既有java又有scala代码时配置 maven-scala-plugin 插件打包时可以将两类代码一起打包 </plugins> <plugin> <groupId>org.scala-tools</groupId> <artifactId>maven-scala-plugin</artifactId&

2020-05-11 21:14:52 393

原创 flink常见报错及解决方案

Exception in thread "main" org.apache.flink.runtime.client.JobExecutionException: Job execution failed.Caused by: java.lang.Exception: java.net.SocketException: Connection resetCaused by: java.net.SocketException: Connection resetNo new data sinks have

2020-05-11 21:09:59 1199

原创 ModuleNotFoundError: No module named redis

目录1.cmd+R打开命令行窗口2.安装redis3.下载redis-py4.安装redis-pypython不支持redis,因为会报该错误需要安装该模块才能使用安装步骤1.cmd+R打开命令行窗口2.安装redisC:\Users\Administrator>pip install redis3.下载redis-pyC:\Users\Administrator>git clone https://github.com/wuchengwei0122/redis-py.git

2020-05-09 12:47:21 2832 2

原创 找不到该类NoClassDefFoundError:net/sf/ezmorph/Morpher

报错信息:找不到该类NoClassDefFoundError:net/sf/ezmorph/Morpher如下图解决思路:本地Maven仓库是有这个jar包的,但是依然报找不到jar包,删除本地jar包,重新下载发现下载完成后本地仓库没有本地有两个Maven,Maven地址配错,更换后解决了该问题...

2020-05-07 09:22:13 89

原创 FAILED: RuntimeException org.apache.hadoop.hive.ql.security.authorization.plugin.HiveAuthzPluginExce

完整报错信息FAILED: RuntimeException org.apache.hadoop.hive.ql.security.authorization.plugin.HiveAuthzPluginException: SQL standards based authorization should not be enabled from hive cliInstead the use o...

2020-05-05 16:20:40 289

原创 查看python源码而不是pyi文件

在IDEA中按如下方式配置

2020-04-30 13:39:07 1027 2

原创 .sh: line 15: syntax error: unexpected end of fi

报错如下:/root/test/1reduce_clientlog.sh: line 15: syntax error: unexpected end of fi错误的结尾,打开检查没有什么错误结尾显示unix文本:e ++ff=unix %windows>liunx直接粘贴会出现格式转换问题,删除^M即可...

2020-04-24 10:24:39 116

原创 azkaban调度任务直接失败?

问题描述:azkaban调度任务直接失败?如下图,并且没有日志产生解决过程:查看服务器中executor日志[root@node4 logs]# lsazkaban-execserver.log[root@node4 logs]# pwd/opt/azkaban/azkaban-exec/bin/logs[root@node4 logs]# 找出错误原因:azkaban....

2020-04-22 22:01:26 570

原创 java.net.UnknownHostException: mycluster

spark本地操作hive时,报错究其原因是,不能发现hadoop集群解决方法:故将hadoop的conf目录下的core-site.xml和hdfs-site.xml放到resource目录下此外需要注意的是本地运行的路径需要改为file:///+绝对路径不然,spark会去配置文件中寻找数据路径...

2020-04-21 00:07:38 1034

原创 yarn查看日志

1.命令行:yarn logs -applicationId 应用id2.yarn界面访问 http://ip:8080

2020-04-20 21:12:47 665

原创 ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Hive exited

报错信息ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Hive exited with status 1场景:当sqoop从mysql向hive中导入数据时报错经检查是sqoop的版本和hadoop不一致导致,更换sqoop版本问题得到解决...

2020-04-20 21:07:52 253

原创 如何将桌面应用放到开始屏幕

如何将桌面应用放到开始屏幕

2020-04-17 17:43:13 279

原创 一文读懂之数据仓库与维度建模
原力计划

1.数据仓库(Data Warehouse)在日益激烈的商业竞争中,企业迫切需要更加准确的战略决策信息。在以往的关系型数据库系统中,企业拥有海量的数据,这些数据对于企业的运作是非常有用的,但是对于商业战略决策和目标制定的作用甚微,不是战略决策要使用的信息。关系型数据库很难将这些数据转换成企业真正需要的决策信息,原因如下:1.一个企业中可能有很多管理系统平台,企业数据分散在多种互不兼容的系统...

2020-04-17 13:45:58 628

原创 一文读懂之数据库三大范式与ER建模
原力计划

1.数据库(DataBase)数据库是按照数据结构来组织、存储和管理数据的仓库,是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合。数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可视为电子化的文件柜,存储电子文件的处所,用户可以对文件中的数据进行新增、查询、更新、删除等操作,数据组织主要是面向事务处理任务。1.1...

2020-04-17 10:05:54 405

转载 为什么要用窗口函数?

目录窗口函数具有什么功能?但是这些功能我们的group看差别:那么为什么叫窗口函数?窗口函数的语法:窗口函数具有什么功能?分组和排序但是这些功能我们的groupby和order by不是就可以实现了吗?看差别:场景:统计各班人数当我们使用group by来分组统计的时候当我们使用窗口函数的时候很明显当我们使用group by分组时改变了原来数据库的行数,即生成了一张新表,但是...

2020-04-16 18:06:15 445

原创 手把手教你实现kafka集群搭建

目录1.解压2.修改配置2.1将log目录修改为/kafaka-logs2.2修改zookeeper2.3编写启动脚本2.4修改node2和node3的service.properties3.启动4.测试选择搭建主机选择node1,node2,node3搭建集群1.解压[root@node1 apps]# tar -zxvf kafka_2.11-0.11.0.3.tgz -C /opt...

2020-04-15 17:36:51 132

原创 一文读懂之Scala
原力计划

目录1.Scala安装使用2.IDE配置scala2.1 IDEA配置scala插件2.2eclipse配置scala插件2.3scala ide1.Scala安装使用1.windows安装,配置环境变量官网下载下载好后安装。双击msi包安装,记住安装的路径。配置环境变量(和配置jdk一样)新建SCALA_HOME注意:这里建议将Scala安装到纯英文没有空格和特殊符号的路径下。避...

2020-04-11 14:39:14 89

原创 idea编写scala提示variable和specify type

2020-04-07 23:44:54 236

原创 hadoop之组件

1.Hadoop Commonhadoop通用组件:包含了其他hadoop模块要用到的库文件和工具2.HDFS分布式文件系统(Hadoop Dsitributed File System)运行于通用硬件(一般来说对硬件要求不高,廉价的都行)上的分布式文件系统,高吞吐,高可靠3.YARN资源管理组件,于2013年引入的组件,用于管理集群中的计算资源并在这些资源上调度用户应用.4....

2020-04-04 20:47:49 108

原创 Hadoop1.x/Hadoop2.x/Hadoop3.x的区别

Hadoop1.x是一个namenode一个scondarynamenode,到了hadoop2.x版本取消了scondarynamenode,但是增加了一个namenode,有两个namenode一主一备

2020-04-04 20:46:58 307

原创 hadoop之文件读写流程

写文件流程1.调用客户端的对象DistributedFileSystem的create方法2.DistributedFileSystem会发起对namenode的一个RPC连接,请求创建一个文件,不包含关于block块的请求.namenode会执行各种各样的检查,确保要创建的文件不存在,并且客户端有创建文件的权限.如果检查通过,namenode会创建一个文件(在edits log中,同时更新...

2020-04-04 19:03:37 323

原创 HDFS之组件

1.NameNode2.SecondaryNameNodefsimage和edits log合并过程图3.DataNode组件图:1.NameNode1.NameNode就像班主任,主要负责管理文件系统的命令空间,文件元数据存放在内存中2.fsimage镜像文件,edits log编辑日志:两种方式在Namenode中进行持久化2.SecondaryNameNode...

2020-04-04 18:37:35 243

原创 修改/etc/profile文件之后vim等命令不能使用

问题描述:修改/etc/profile文件之后发现vim等命令不能使用解决方法:手动生效命令[root@node1 ~]# export PATH=/bin:/sbin:/usr/bin:/usr/sbin

2020-04-03 11:34:41 403

原创 Kibana启动常见报错信息的解决方案

报错信息"warning","migrations","pid":6181,"message":"Another Kibana instance appears to be migrating the index. Waiting for that migration to complete. If no other Kibana instance is attempting migration...

2020-03-26 14:23:47 5319 6

原创 手把手教你实现VMware安装系统centos7

CentOS_DVD下载地址选择稍后安装操作系统

2020-03-20 19:12:39 91

原创 mysql常见报错及解决方法

1.Your password does not satisfy the current policy requirements#验证策略默认为1,需要包括大小写,特殊字符,数字等,改为0set global validate_password_policy=0;#密码默认长度为8,改为1set global validate_password_length=1;之后在修改密码....

2020-03-12 21:52:27 149

原创 bin/../conf/zoo.cfg Error contacting service. It is probably not running.

运行MR任务时,报错zk连接被拒绝检查zk集群都是启动状态,发现其中一台,出现如下错误[root@node4 bin]# zkServer.sh statusJMX enabled by defaultUsing config: /opt/zookeeper-3.4.6/bin/../conf/zoo.cfgError contacting service. It is probably...

2020-03-12 00:32:22 133

hadoop-2.6.5-win10x64-1809.tar.gz

windows系统HDFS,能够使用java客户端操作HDFS(开发工具有IDEA,Eclipse插件)

2020-02-26

china.xml,刚才又发现了一些小问题,自己修改之后,上传上去,希望帮助有需要的人

之前csdn下载的报错,自己修改之后,上传上去,希望帮助有需要的人

2019-08-29

china.xml之前csdn下载的报错,自己修改之后,上传上去,希望帮助有需要的人

之前csdn下载的报错,自己修改之后,上传上去,希望帮助有需要的人

2019-08-29

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除