- 博客(15)
- 收藏
- 关注
RSS订阅原创 拉新推送钉钉脚本python
20230320 2.【主】生成分享链接人数 22。20230320 7.【客】激活APP人数 1。20230320 4.【客】点击链接页面展现人数 12。20230320 1.【主】页面展现人数 41。----数据文件格式。
2023-03-21 15:31:43
166
原创 用shell脚本检索yarn任务，任务死掉自动重启
然后通过任务调度，给该脚本设置需要执行的时间周期即可。（通过crontab -e设置周期时，似乎会存在误判情况，还需要根据实际情况确认一下，通过阿里云等调度时没有问题）在遇到SparkStreaming等需要一直执行的任务时，老会遇到任务死掉的情况(FINISHED,KILLED,FAILED)导致任务终止，需要我们手动再启动任务。可以写一个shell脚本来让它自动检索任务是否在执行中，如果yarn中没有该任务，就通过脚本启动它。
2023-02-20 15:50:44
809
2
原创 找出HDFS空文件并删除的脚本(分区内空文件)
扫描指定分区所有文件 获取文件名 指定路径/*扫描HDFS指定分区 判断是否有空文件，有则删除空文件。#̲获取当前文件的大小 …#如果文件大小为0就删除。
2022-08-25 14:55:57
594
原创 Hive任务报错Unexpected end of input stream
Hive报错 Unexpected end of input stream 解决
2022-06-29 16:52:44
574
原创 Zookeeper脚本
自己写一个可以同时启动停止zookeeper集群的脚本。在Linux的用户目录下（这个目录随意都可以，比如我的是/home/jixiong/）执行 vi zkStart.sh 我们的目的是在这这里创建一个文件 然后在里面编写同时启动集群的脚本代码进入start.sh的编辑状态下然后在里面编写如下代码#!/bin/shecho “start zkServer…”for i in jixiong tomcat1 tomcat2 （这里是集群的主机名）doecho “start zk
2020-12-03 20:17:01
461
原创 Hive常用交互命令
Hive常用交互命令–创建表create table flowinfo(id string,phonenum string,mac string,ip string,url string,num1 string,num2 string,upflow int,downflow int,code string,datelong string)row format delimited fields terminated by " ";–导入表load data local inpath “/home/
2020-12-03 19:51:24
191
原创 使用spring时如何解决中文乱码问题
有以下几处地方有可能出现问题1 web.xml文件里需要设置以下代码 <!-- 解决post乱码问题 --> <filter> <filter-name>CharacterEncodingFilter</filter-name> <filter-class>org.springframework.web.filter.CharacterEncodingFilter</filter-class> <i
2020-11-02 09:56:47
355
原创 Spring框架
1 Spring概述1)Spring是一个开源框架2)Spring为简化企业级开发而生，使用Spring，JavaBean就可以实现很多以前要靠EJB(Enterprise JavaBean)才能实现的功能。同样的功能，在EJB中要通过繁琐的配置和复杂的代码才能够实现，而在Spring中却非常的优雅和简洁。3)Spring是一个IOC（控制反转）(DI)和AOP(面向切面编程)容器框架。4)Spring的优良特性① 非侵入式：基于Spring开发的应用中的对象可以不依赖于Spring的API（实
2020-11-02 09:43:14
156
原创 mybatis多表查询的三种方式
MyBatis 多表查询的三种方式这里用员工和部门表举例子1、association 查询<resultMap id="selectemp1" type="hashmap"> <result column="name" property="name"></result> <result column="job" property="job"></result> <result colum
2020-10-21 10:42:16
952
原创 properties属性和 settings设置
properties属性可外部配置且可动态替换的，既可以在典型的 Java 属性文件中配置，亦可通过 properties 元素的子元素来配置<properties> <property name="driver" value="com.mysql.jdbc.Driver" /> <property name="url" value="jdbc:mysql://localhost:3306/test_mybatis" />
2020-10-19 20:02:58
926
原创 如何用IDEA创建我的第一个mybatis
### Cause: org.apache.ibatis.builder.BuilderException: Error parsing SQL Mapper Configuration. Cause: org.apache.ibatis.builder.BuilderException: Error creating document instance. Cause: com.sun.org.apache.xerces.internal.impl.io.MalformedByteSequenceExce
2020-10-19 19:07:42
648
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人