- 博客(16)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 hive优化,以及sql优化
目的序新的一年又到了，该跳槽的跳槽了,那跳槽是不是又得面试了，面试中总会问些用不到的。或者有些用到的，但是却当时没说出来。后悔万分，之前被这种问题居然问懵逼了。天天上班写代码，忘记了理论知识。今天补充一下,hive优化。看了别人以图片的意思似乎很有趣，那么我也以图片形式吧...
2020-04-30 15:08:25
271
原创 如何隐藏自己的应用程序在服务器上不被发现?
i pensier stretti&il viso sciolto. -----------Hemy Wootton《黑客与画家》守口如瓶,笑脸相迎目录序1.0 创建单调定时器1.1 创建单元文件1.2创建python脚本1.3执行脚本1.4通过定时器启动任务序目的:用来保护公司机密的监控...
2020-04-26 23:13:12
2466
1
原创 docker启动jar
1.创建文件夹docker123mkdir docker1232.cd docker123cd docker1233.将打包的springboot_jar文件丢到docker1234.在docker123中创建文件Dockerfiletouch Dockerfile5.目录结构如下6.Dockerfile配置如下7.构建jar镜像,在dockerF...
2020-04-24 17:40:46
931
1
原创 IDEA git上传项目到新的git仓库
1.本地创建文件夹2.右键文件夹git bash here,,git clone 远程新git仓库地址 xxxx.git(这个过程会自动创建文件 例如a2)3.复制你的项目文件(比如idea所保存的项目目录)4.复制到你创建的文件夹下的a2下5.在gitbash 中 cd a2下6.git add .7.git commit -m "test"8.git push输...
2020-04-21 17:20:40
1150
原创 yarn资源调度器的使用
比如公平调度器调度器的使用是通过yarn-site.xml配置文件中的yarn.resourcemanager.scheduler.class参数进行配置的，默认采用Capacity Scheduler调度器。如果我们要使用Fair调度器，需要在这个参数上配置FairScheduler类的全限定名：org.apache.hadoop.yarn.server.resourcemanager.s...
2020-04-16 11:18:42
175
原创 docker 提高pull速度
docker默认是采用国外的官网，但是由于官网可能比较慢。如果是阿里云服务器会自动以阿里云的服务器作为基础。但是你如果不是阿里云的服务器，那么你就得自己制定镜像。地址https://cr.console.aliyun.com/cn-hangzhou/instances/mirrors下面有针对不同系统的详细设置配置完成后重启docker即可。systemctl res...
2020-04-13 16:08:46
319
原创 保护自己代码
1.比如python项目，使用代码混淆器，混淆代码2.服务器添加密匙，即使别人修改也能访问3.java修改代码并且git合并所有分支,使代码不能回溯到之前的版本，本地保存源码...
2020-04-13 11:38:15
209
原创 ubantu docker安装docker-compose 搭建集群 环境
sudo apt-get install -y python3-pipsudo pip3 install setuptoolssudo pip3 install --upgrade pipdocker-compose -v
2020-04-13 10:32:38
191
原创 Docker中 kafka为什么要安装zookeeper
如果你使用的kafka是docker中更新维护最好的那个Kafka。那么要装zookeeper，原因是因为:
2020-04-10 14:25:04
611
原创 docker启动其它容器
docker run -p 9092:9092 -d wurstmeister/kafka:2.11-1.1.0比如俺启动kafkadocker run-p 端口号:端口号-d后台运行后面的这个wurstmeister/kafka:2.11-1.1.0等于 PEPOSITORY + TAG(版本标签)执行结果...
2020-04-10 00:48:53
197
原创 docker卸载镜像
由于之前第一次使用docker pull之后就默认最新的了，这样会导致后期版本不兼容。所以这里。卸载教程首先,查看你的镜像docker images然后查看运行iddocker ps -a用stop停止，如果发现stop不了，那就kill他的下一步，发现kafka和zookeeper都在运行的状态,于是kill他们(docker的kill)docke...
2020-04-09 18:15:31
718
原创 Docker 安装出现Version '18.06.0~ce~3-0~ubuntu' for 'docker-ce-cli' was not found
由于公司内部分离，所以现在为了完成新业务，但是却没有办法搭建服务器集群的问题。暂时业务使用单机。需要搭建flink,kafka,redis,es,mysql等镜像，打算使用docker镜像，但是之前没有接触过。在安装过程中出现这个问题。执行这一步sudo apt-get install docker-ce=5:18.09.4~3-0~ubuntu-bioni docker-ce-...
2020-04-09 16:31:08
3440
原创 presto时间戳转换错误 Expected: to_unixtime(timestamp) , to_unixtime(timestamp with time zone)
Expected: to_unixtime(timestamp) , to_unixtime(timestamp with time zone)(cast('2019-09-09 12:32:05' as timestamp)-cast('2019-09-08 12:32:05' as timestamp)减出来是 1 xx:xx:xx as s执行方法 to...
2020-04-02 11:58:51
4197
原创 presto时间转换日期报错 failed: Value cannot be cast to date: 2020-01-27 23:30:30
例 查询语句selectcast('2020-01-27 23:03:53' as date)from xxx出现标题错误failed: Value cannot be cast to date: 2020-01-27 23:30:30 cast('2020-01-27' as date)却没有问题解决方案:cast('2020-01-27 23:03:53'...
2020-04-02 10:24:37
7592
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人