运维
用来整理运维相关知识
zhyajshhz
熟悉的开发环境:Linux。
熟悉的开发语言:C++。
涉及的开发语言:python, C++, JAVA。
涉及的技术方向:大数据,服务器业务系统开发。
涉及的业务方向:大数据。
展开
-
CDH集群的hive升级
简介我们的CDH集群使用的是6.3.0版本,默认的hive版本是2.1.1,在使用过程中发现presto创建的orc表,在hive中查询报错,在spark中查询不到数据。但hive或者spark生成的orc表,presto可正常使用。因为需要使用apache atlas,故升级了hive到3.1.2,发现hive中可正确查询presto生成的orc表,但spark依然查询不了,肯定了是hive版本导致的问题,排查以后,替换spark目录下hive目录下的hive的jar包,就可以正确查询presto生成的原创 2020-09-23 09:53:57 · 3872 阅读 · 14 评论 -
部署yanagishima纪实
部署yanagishima纪实简介Gradle安装Node.js安装下载源码并编译修改yanagishima的配置文件yanagishima的启停简介 yanagishima 是presto的一个客户端web工具,目前支持相对较好,部署一下。Gradle安装// A code block# 下载Gradlewget http://services.gradle.org/distributions/gradle-5.6.2-bin.zip mv gradle-5.6.2-bin.zip原创 2020-09-22 14:06:22 · 3118 阅读 · 7 评论 -
docker单机部署mongodb
docker单机部署mongodb简介部署安装docker-compose编写yaml文件初始化数据的脚本部署简介在做项目需要用到mongodb来存储设备的心跳日志,因为其他组件都是用的docker部署,所以mongodb也使用docker单机部署。部署过程很简单,但是使用的时候总是提醒心跳库使用的用户名密码校验失败,因为mongodb需要开启登陆验证,但是初始化过程中并没有创建初始的数据库,...原创 2020-04-09 14:36:31 · 439 阅读 · 0 评论 -
centos下离线部署小技巧
centos下离线部署小技巧简介下载安装简介运维部署过程中经常遇到需要离线部署的时候,这时候需要先将软件包下载下来携带到离线环境再部署。今天分享一下centos下离线部署这个过程。下载首先需要下载所需的软件包。// 下载 yum install --downloadonly --downloaddir=指定目录 软件名称如果centos没有downloadonly插件,需要先安装插...原创 2020-04-09 10:08:47 · 152 阅读 · 0 评论