qq825193156的专栏

原创 hue源码编译

0，git clone https://gitee.com/qzw2015/hue.gityum install ant asciidoc cyrus-sasl-devel cyrus-sasl-gssapi cyrus-sasl-plain gcc gcc-c++ krb5-devel libffi-devel libxml2-devel libxslt-devel make mysql mysql-devel openldap-devel python-devel sqlite-devel gmp-d

原创 DolpinScheduler架构总结

主流程图Master容错Worker容错Worker重试汇报

原创 DolphinScheduler Ambari插件解说

1，stacks定义标准statcks中定义了HDP的不同的版本，如果想自定义一个插件，必须首先要明了此插件是放在HDP那个版本中的，比如下图是放在3.1版本中的，在3.1下建立自己的插件名称，然后自定义建立 metainfo.xml 文件，该文件引用了common-services中的指定的版本大数据平台 > 2. Ambari插件 > 3.png2，common-services定义common-services 定义了插件的不同的版本，而且不同的版本是可以有继承关系的。大数据平

原创 Ambari整体架构

原创 Ambari 源码编译

Ambari 2.7.3源码编译1，安装JDK[root@bigdata-test ambari-src]# java -versionjava version “1.8.0_151”Java™ SE Runtime Environment (build 1.8.0_151-b12)Java HotSpot™ 64-Bit Server VM (build 25.151-b12, mixed mode)2，安装maven[root@bigdata-test ambari-src]# mvn -

原创 Dolphinscheduler 测试

1，创建用户和租户输入前端登录网址 ： http://192.168.xx.xx:12345/dolphinscheduler/ui/view/login/index.html[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Mvi3eG0T-1576744683762)(C:\Users\Administrator\AppData\Roaming\Typora...

原创 docker 关联 github 自动化打镜像

docker 关联 github 自动化打镜像登录docker hub 官网(https://www.docker.com/)点击个人账号下的Account Settings连接github点击GitHub进行连接弹出GitHub登录页面，如果已经登录，则会直接连接上新建仓库进入Builds标签下，点击Configuration Automated Buil...

原创 EasySchedulerr大数据调度系统架构分析

EasySchedulerr大数据调度系统架构分析导语EasyScheduler是易观平台自主研发的大数据分布式调度系统。主要解决数据研发ETL 错综复杂的依赖关系，而不能直观监控任务健康状态等问题。EasyScheduler以DAG流式的方式将Task组装起来，可实时监控任务的运行状态，同时支持重试、从指定节点恢复失败、暂停及Kill任务等操作。背景任务调度系统在大数据平台当中是一个核心...

原创 Superset安装文档及遇到的问题解决

Superset安装文档及遇到的问题解决