- 博客(13)
- 资源 (1)
- 收藏
- 关注
原创 Linux服务器预警通知发送至钉钉机器人
linux下tomcat服务器触发预警通知,并推送至钉钉群一、执行频率:每30分钟执行一次二、预警范围:磁盘使用超过80%发送预警通知 cpu使用率小于20%发送预警通知 浏览网址出现连接超时或者tomcat挂掉,自动重启tomcat三、路径配置脚本:/opt/monitor.sh 执行文件位置:/opt/monitor/tomcat_monitor.log /opt/monitor/monitor_日期.info(每天创建一个文件)四、配置预警脚本流程:配置执行任务
2020-10-29 17:53:21 162
原创 kafka集群搭建
一、前提准备笔者在这里的使用版本,仅供参考名称 版本 地址 zookeeper 3.4.12 zookeeper官网下载地址 kafka 1.1.0 kafka官网下载地址 主要配置信息如下(这里的zookeeper集群是之前搭建的myid都是以前设置的,而broker.id怕混淆就和主机ip结尾设置一样的)主机IP ...
2018-07-16 21:28:53 1663 1
原创 spark streaming + kafka 找不到kafkaUtils类
maven构建streaming+kafka的项目问题:运行项目报找不到KafkaUtils类:(如下图)于是我打开idea但确实可以找到这个包下的KafkaUtils类,刚开始以为打包的问题,找半天都没错,上网说可能是scala和kafka版本的冲突,但是我检查了一遍都没问题,版本不冲突spark2.3、scala2.11、kafka0.10解决方式:1、去maven仓库找到KafkaUtils...
2018-07-03 07:51:38 9526
原创 kafka版本1.1.0 javaAPI实现生产者、消费者
一、环境准备:1、maven工程中引入依赖: <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.12</artifactId> <version>1.1.0</version>
2018-06-19 22:14:45 6826
原创 spark 自定义排序
spark 自定义排序一、为什么要自定义排序?在spark中,利用rdd的sortBy函数进行排序,我们只能单一对某个元素,然而这并不能解决工作中的实际业务,所以今天整理一个简单自定义的排序,类解决这个问题。二、定义要素1、定义一个类,继承Ordered2、实现Serializable序列化3、重写compare方法三、上代码import org.apache.spark.{SparkConf, ...
2018-06-04 22:03:39 1094
原创 hadoop集群分布式搭建以及环境配置
一、前期环境准备操作系统CentOS 7四台虚拟机:(克隆最小安装版本的虚拟机) master 192.168.174.110 主机datanode1 192.168.174.111 子机datanode2 192.168.174.112 子机datanode3 192.168.174.113 子机软件包如下:oracle官网下载 jdk-8u161-linu...
2018-02-03 00:10:29 348
原创 主机navicat连接虚拟机linux出现错误代码:10038
问题:错误信息:Can't connect to MySQL server on 'xxxxx'(10038) 解决方法:查看网络的端口信息:netstat -ntpl查看防火墙的状态,发现3306的端口是丢弃状态:iptables -vnL这里要清除防火墙中链中的规则iptables -F注:通过以上如果还不能连接,说明mysql未授权给用户远程登录的...
2018-01-22 14:04:26 3876 4
原创 linux环境下安装配置tomcat
一、前期环境准备:利用Xshell工具安装jdk,Xshell如何安装?可以参照我的:Xshell配置连接虚拟机tomcat下载地址:tomcat下载二、安装:在 /usr/local 下创建一个tomcat的文件夹,如下图所示: 使用Xshell把tomcat安装包上传到/usr/local/installPack目录下(这是放安装包的文件夹,自行创建)rz...
2018-01-19 15:52:34 247
原创 linux环境下安装配置maven
一、前期环境准备:利用Xshell工具安装jdk,Xshell如何安装?可以参照我的:Xshell配置连接虚拟机maven下载地址:maven下载二、安装在 /usr/local 下创建一个maven的文件夹,如下图所示:使用Xshell把maven安装包上传到/usr/local/installPack目录下(这是放安装包的文件夹,自行创建)rz把安装包解压到...
2018-01-19 12:42:39 2398
原创 linux环境下安装配置jdk1.8
一、前期环境准备利用Xshell工具安装jdk,Xshell如何安装?可以参照我的:Xshell配置连接虚拟机jdk下载地址(oracle官网):jdk下载二、安装1、xshell打开下载文件rz 命令找到并打开下载的jdk文件先为文件赋予执行的权限chmod 755 jdk-8u161-linux-x64.rpm(jdk安装包) 查看是否赋予成功...
2018-01-18 17:50:21 4091
原创 本地主机Xshell连接虚拟机Linux CentOS
一、前期环境准备:在虚拟机安装Linux系统,并安装CentOS。笔者在这里的镜像为CentOS7Xshell下载地址:http://rj.baidu.com/soft/detail/15201.html?ald二、配置信息如下:安装完CentOS 7,虚拟机的IP都是默认动态的。当我们想要Xshell远程来操作虚拟机时,每次都需要查看虚拟机的IP才能连接使用。针对这种情况,我们需...
2018-01-17 15:38:53 22916 5
kafka-manager
2018-07-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人