自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(22)
  • 资源 (1)
  • 收藏
  • 关注

原创 ab命令压力测试攻击

ab命令会给服务器造成非常高的负载,可能会造成目标服务器资源耗尽,严重时可能会导致死机。

2022-10-27 18:01:49 180

原创 致翔OA msglog.aspx SQL注入漏洞

致翔OA msglog.aspx文件存在SQL注入漏洞,攻击者通过漏洞可获取敏感信息。

2022-10-27 16:50:00 296

原创 解决:项目无法读取src/main/java目录下面的配置文件问题

解决:项目无法读取src/main/java目录下面的配置文件问题问题:在启动maven项目,maven资源过滤问题导致我们可能会遇到无法读取到dao对应的mapper.xml文件。原因:src/main/java默认加载java文件,所以这个目录在开发时一般只放java文件。src/main/resources目录放置项目中的各种配置文件及静态资源,如html页面、yml文件、properties文件、css文件、js文件、xml文件等。解决办法如下:方法一:把对应的Mapper.xml移动到

2021-09-07 11:20:20 1438

原创 报:无法在web.xml或使用此应用程序部署的jar文件中解析绝对uri

报:无法在web.xml或使用此应用程序部署的jar文件中解析绝对uri严重 [http-nio-8080-exec-4] org.apache.catalina.core.StandardWrapperValve.invoke 在路径为的上下文中,Servlet[jsp]的Servlet.service()引发了具有根本原因的异常无法在web.xml或使用此应用程序部署的jar文件中解析绝对uri:[http://java.sun.com/jsp/jstl/core]org.apache.jasper

2021-08-27 23:13:32 776

原创 报:严重 [RMI TCP Connection(3)-127.0.0.1]

报:严重 [RMI TCP Connection(3)-127.0.0.1]严重 [RMI TCP Connection(3)-127.0.0.1] org.apache.tomcat.util.modeler.BaseModelMBean.invoke 调用方法[manageApp]时发生异常 java.lang.IllegalStateException: 启动子级时出错原因:Web.xml文件出错导致的解决:认真检查代码...

2021-08-22 17:43:16 7959 6

原创 报:java.lang.NullPointerException

报java.lang.NullPointerException类型 异常报告描述 服务器遇到一个意外的情况,阻止它完成请求。例外情况java.lang.NullPointerException java.util.Properties$LineReader.readLine(Properties.java:434) java.util.Properties.load0(Properties.java:353) java.util.Properties.load(Properties.java

2021-08-22 17:41:50 377

原创 报:类com.qin.servlet.HelloServlet不是Servlet

报错误:类com.qin.servlet.HelloServlet不是Servlet类型 异常报告消息 类com.qin.servlet.HelloServlet不是Servlet描述 服务器遇到一个意外的情况,阻止它完成请求。例外情况jakarta.servlet.ServletException: 类com.qin.servlet.HelloServlet不是Servlet org.apache.catalina.authenticator.AuthenticatorBase.invoke

2021-08-22 07:57:17 1210

原创 Spark yarn运行时报:ClassNotFoundException:com.sun.jersey.api.client.config.ClientConfig错误

在Spark yarn运行时报:java.lang.ClassNotFoundException: com.sun.jersey.api.client.config.Client运行环境:Hadoop3.1.3和Spark2.1.1原因分析:Spark2中jersey版本是2.22,但是yarn中还需要依赖1.9,版本不兼容导致的。在spark的jar目录下:在Hadoop的hadoop-3.1.3/share/hadoop/yarn/lib目录下:解决办法如下:在Hadoop的yarn-

2021-04-24 11:10:31 727

原创 六、大数据之Sqoop环境搭建

目录Sqoop简介:(1)安装Sqoop(2)修改配置文件(3)拷贝驱动(4)验证(5)测试(6)Sqoop官方文档说明:Sqoop安装包:Sqoop简介:​ Sqoop是apache旗下的一款“Hadoop和关系型数据库服务器之间传送数据”的工具,核心的功能有两个:导入和导出。​ 本质就是迁移数据, 迁移的方式:就是把sqoop的迁移命令转换成MR程序​ 导入数据:MySQL,Oracle 导入数据到 Hadoop 的 HDFS、HIVE等数据存储系统

2021-04-19 16:30:18 82

原创 五、大数据之Kafka环境搭建

目录Kafka简介:(1)集群部署规划(2)安装Kafka(3)创建logs文件夹(4)修改配置文件(5)配置环境变量(6)配置文件分发(7)启动Kafka集群(8)Kafka群起脚本(9)Kafka官方文档说明:Kafka安装包:Kafka简介:Kafka是一个分布式的基于发布/订阅模式的消息队列,主要应用于大数据实时处理领域。Kafka基本架构:​ 1.为方便扩展,并提高吞吐量,一个topic分为多个partition​ 2.配合分区的设计,提出消费者组概念,组内每个消费者并行消费​ 3.为

2021-04-19 01:20:55 99

原创 四、大数据之Flume环境搭建

目录Flume简介:(1)集群部署规划(2)安装Flume(3)删除难以兼容的文件(4)修改配置文件(5)Flume官方文档说明:(6) 官方案例测试Flume安装包:Flume简介:​ Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。特点:1、复杂流动性:Flume允许用户进行多级流动到最终目的地,也允许扇出流(一到多)、扇入流(多到一)的、故障转移和失败处理。2、可靠性:事务性的数据传递,保证了数据的可靠

2021-04-19 01:17:18 183 2

原创 三、大数据之Zookeeper完全分布式集群搭建

目录Zookeeper简介:(1)集群部署规划(2)安装Zookeeper(3)配置zook.cfg文件(4)配置服务器编号(5)配置Zookeeper环境变量(6)配置文件分发(7)集群启动(8)zookeeper群启脚本(9)Zookeeper官方文档说明:Zookeeper安装包Zookeeper简介:Zookeeper是一个开源的分布式的,为分布式应用提供协调服务的Apache项目。ZooKeeper是一个分布式小文件系统,并且被设计为高可用性。通过选举算法和集群复制可以避免单点故障,由于

2021-04-19 01:05:40 296

原创 二、大数据之Hadoop完全分布式集群搭建

目录Hadoop简介:(1)安装JDK和Hadoop(2)配置环境变量(3)集群部署规划(4)配置免密登录(5)修改Hadoop配置文件1.vim hdfs-site.xml2.vim core-site.xml3.vim yarn-site.xml4.vim mapred-site.xml5.vim workers(6)配置文件分发(7)集群启动1.格式化NameNode2.启动HDFS集群3.启动YARN集群(8)查看集群节点启动情况1.jps查看2.Web端查看(9)Hadoop的目录结构(10)Ha

2021-04-19 01:03:02 211

原创 一、大数据之虚拟机环境搭建

目录(1)修改虚拟机的静态IP(2)修改主机名(3)修改主机名称映射(4)关闭防火墙(5)配置用户具有root权限(6)在/opt目录下创建文件夹(1)修改虚拟机的静态IPsudo vim /etc/sysconfig/network-scripts/ifcfg-ens33修改如下配置:DEVICE=ens33TYPE=EthernetONBOOT=yesBOOTPROTO=staticNAME="ens33"#ip地址IPADDR=192.168.1.100#网关GATEWAY=

2021-04-19 00:57:48 256

原创 在IDEA项目打包或编译时报:Using platform encoding (UTF-8 actually) to copy filtered resources 警告

在IDEA项目打包或编译时报警告:Using platform encoding (UTF-8 actually) to copy filtered resources, i.e. build is platform dependent!问题如图所示:解决办法如下:项目pom.xml中添加如下配置:<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>成功如下:...

2021-04-11 12:40:22 352

原创 Hadoop3.x版本搭建伪分布式启动过程中报:(publickey,gssapi-keyex,gssapi-with-mic,password).

Hadoop3.x版本搭建伪分布式启动过程中报:(publickey,gssapi-keyex,gssapi-with-mic,password).报错如下:解决办法如下:第一步:生成公钥和私钥输入命令,然后回车,会提示输入内容,什么都不用写,一路回车就可以[root@hadoop-2019040744-0 hadoop]# ssh-keygen -t rsa第二步:创建authorized_keys文件并修改权限[root@hadoop-2019040744-0 ~]# cd .s

2021-03-31 15:49:04 71

原创 Linux之DNS域名解析服务

Linux之DNS域名解析服务一、安装Bind服务程序BIND(Berkeley Internet Name Domain,伯克利因特网名称域)服务是全球范围内使用最广泛、最安全可靠且高效的域名解析服务程序。DNS域名解析服务作为互联网基础设施服务,其责任之重可想而知,因此建议大家在生产环境中安装部署bind服务程序时加上chroot(俗称牢笼机制)扩展包,以便有效地限制bind服务程序仅能对自身的配置文件进行操作,以确保整个服务器的安全。第一步:yum install -y bind-chro

2021-03-29 20:18:52 193 1

原创 大数据之06Hive环境搭建

大数据之06Hive搭建第一步:Hive安装及配置(1) 把apache-hive-3.1.2-bin.tar.gz上传到linux的/opt/software目录下(2) 解压apache-hive-3.1.2-bin.tar.gz到/opt/module/目录下面tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/(3) 修改apache-hive-3.1.2-bin.tar.gz的名称为hivemv /opt/module/

2021-03-21 09:17:43 100

原创 解决hdfs程序报SLF4J: Failed to load class “org.slf4j.impl.StaticLoggerBinder“.

解决hdfs程序报 SLF4J: Failed to load class “org.slf4j.impl.StaticLoggerBinder”.当在Hadoop中执行以下命令:start-dfs.sh或者hadoop fs 具体命令 或者 hdfs dfs 具体命令报以下代码错误时:[tan@daoop102 lib]$ start-dfs.shStarting namenodes on [hadoop102]Starting datanodesStarting seconda

2021-03-20 21:28:26 1395 1

原创 MySQL的安装配置

MySQL的安装配置第一步:卸载与上传1.卸载自带的Mysql-libs(如果之前安装过mysql,要全都卸载掉)rpm -qa | grep -i -E mysql\|mariadb | xargs -n1 sudo rpm -e --nodeps #卸载命令2.将安装包和JDBC驱动上传到/opt/software,共计6个01_mysql-community-common-5.7.29-1.el7.x86_64.rpm02_mysql-community-libs-5.7.29-1.

2021-03-20 17:23:53 99

原创 大数据之05HBase完全分布式集群搭建

大数据之05HBase完全分布式集群搭建HBase定义 :HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。逻辑上,HBase的数据模型同关系型数据库很类似,数据存储在一张表中,有行有列。但从HBase的底层物理存储结构(K-V)来看,HBase更像是一个multi-dimensional map。第一步:环境准备1.Hadoop正常部署需要保证Hadoop集群的正常部署并启动:[tan@hadoop102 hadoop-3.1.3]$ start-dfs.sh[t

2021-03-14 22:34:54 125

原创 大数据之04HDFS-HA高可用集群搭建

大数据之HDFS-HA高可用集群搭建1)所谓HA(High Availablity),即高可用(7*24小时不中断服务)。2)实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制:HDFS的HA和YARN的HA。3)Hadoop2.0之前,在HDFS集群中NameNode存在单点故障(SPOF)。4)NameNode主要在以下两个方面影响HDFS集群 NameNode机器发生意外,如宕机,集群将无法使用,直到管理员重启NameNode机器需要升级,包括软件、硬件升级,此

2021-03-14 17:45:33 158

大数据课件.zip

课件

2021-04-08

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除