- 博客(12)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 mysql 一个查询的结果是另一个模糊查询的条件
记录一下select a.*from aLEFT JOIN bon 1 = 1where a.name like concat(’%’,b.name,’%’) GROUP BY name(去重)
2022-03-14 15:59:36
1439
原创 Azkaban2.5.0部署安装（含安装包）
1. 软件下载重要说明:当前, 官方已不再提供二进制安装包下载服务, 需要使用提提供的源码进行编译、打包方式生成二进制文件, 再进行部署安装.在2.x版本中, azkaban是使用ant进行编译打包, 而在3.x的很多版本, 演变为使用gradle编译打包, 在做源码编译打包时需要事先构建相应的打包环境.源码下载地址:https://azkaban.github.io/downloads.html2.5.0源码下载地址:https://codeload.github.com/azkaban/
2021-03-12 15:22:15
638
原创 解决Hive创建文件数过多的问题
一. Hive的创建文件数的限制Hive对文件创建的总数是有限制的，这个限制取决于参数：hive.exec.max.created.files，默认值是10000。如果现在你的表有60个分区，然后你总共有2000个map，在运行的时候，每一个mapper都会创建60个文件，对应着每一个分区，所以60*2000> 120000，就会报错：exceeds 100000.Killing the job解决办法：最简单的解决办法就是调大hive.exec.max.created.files参数。但是
2020-08-25 10:32:15
631
原创 Clouder Manager6.2.0版本安装最全教程以及安装各种服务
基础环境准备1.下载包cm包：网盘地址：CDH 下载地址:2.安装依赖包yum install -y cyrus-sasl-plain cyrus-sasl-gssapi portmap fuse-libs bind-utils libxslt fuseyum install -y /lib/lsb/init-functions createrepo deltarpm python-deltarpmyum install -y mod_ssl openssl-devel python-psy
2020-08-19 17:24:09
1536
转载 Centos7离线安装Cloudera Manager 5.14.1
文章链接添加链接描述亲测修改一点在子节点还需要添加一个文件oracle-j2sdk1.7-1.7.0+update67-1.x86_64.rpm不加这个就没有jdk1.7的哪个文件，会导致后面再安装的时候需要自己去下载，网络不好容易直接断掉...
2020-07-30 10:10:26
127
原创 java 发送从数据库查询的数据作为表格展示
本次说的是用java 发送表格展示的邮件其他发送普通邮件，带附件的邮件在我另外2篇文章中也有好了 ，直接来代码 ，使用到的jar包1 所用的jar网盘连接提取码：0sgd本次使用的是企业邮箱发送public class SendMail_html { /** * 发送邮件的方法 * @param to 接收人 * @param title 邮件主...
2019-11-21 14:45:56
441
原创 java 发送邮件
此代码经测试没问题，只需要填写其中的一些信息就可以直接使用了直接上代码 用到的是java mail 的这个jar包public class demo { /** * 发送邮件的方法 * @param to 接收人 * @param title 邮件主题 * @param content 邮件内容 * @return */ ...
2019-11-18 14:01:32
244
原创 java 发送数据库查询的数据作为excel表格邮件
用的c3p0 来连接的数据库1 所用的jar网盘连接提取码：0sgd我将所有的代码都写在一个方法里面,话不多说直接上代码import com.sun.mail.util.MailSSLSocketFactory;import jxl.Workbook;import jxl.write.*;import jxl.write.biff.RowsExceededException;im...
2019-10-30 17:32:44
1051
原创 java打包（包含所有jar） 多主类执行
idea 打包（包含所以jar）多主类执行1如图234567至此打包完成 之后就可以去自己选择的输出位置找你自己的jar包了8运行命令java -cp jar包路径 运行主类的全路径比如java -cp /execurt/server/jar/curl.jar demo.Fenlei后面也可以加上你要传入的参数...
2019-10-12 11:47:53
899
翻译 hue与hdfs hive hbase的整合
1.**hue的基础配置**cd /hue */ desktop/confvim hue.inisecret_key=jFE93j;2[290-eiw.KEiwN2s3['d;/.q[eIW^y#e=+Iei*@Mn<qW5ohttp_host=node03.hadoop.comis_hue_4=truetime_zone=Asia/Shanghaiserver_user=ro...
2019-03-31 20:36:20
378
原创 Flume基础及测试
1.flume的概述Flume 是 Cloudera 提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的软件。Flume 的核心是把数据从数据源(source)收集过来，再将收集到的数据送到指定的目的地(sink)。为了保证输送的过程一定成功，在送到目的地(sink)之前，会先缓存数据(channel),待数据真正到达目的地(sink)后，flume 在删除自己缓存的数据...
2019-03-17 17:33:30
231
centos7.2.1511下载地址.txt
2020-08-26
java 怎么快速的跨库跨表跨服务器的导入数据
2019-10-31
TA创建的收藏夹 TA关注的收藏夹
TA关注的人