- 博客(6)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 dolphinscheduler-安装
执行install.sh有个坑 需要把这个rm删除操作注释掉 不然会误删文件vim script/scp-hosts.sh # this work for additional information regarding copyright ownership.# See the License for the specific language governing permissions and #ssh -p $sshPort $host "cd $installPath/; rm -rf b
2021-03-29 22:04:22
360
原创 规范-java开发流程-v1
项目管理沟通管理（会议、邮件、即时聊天工具）需求管理文档管理代码版本管理Bug管理需求文档需求变更记录客户的业务流程和性能要求 确定开发环境和运行环境扩展性要求与旧系统的接驳要求。估算出项目工作量原型设计系统设计选择基础平台，无论是采用第三方平台还是自行开发平台，都需要深入了解，查看是否符合要求。应用模块设计(针对业务流程)中间件的采用或自行开发，需要深入了解。 UI设计 数据库设计开发 前端开发 后端开发 数据库开发 运
2021-03-29 14:30:01
198
4
原创 规范-大数据分析平台开发流程-v1
需求分析 原型设计业务调研收集项需收集信息描述调研结果数据集成有哪些数据源要迁移，数据源版本每种数据源的数据全量数据规模迁移目的端数据源种类以及版本数据的迁移周期：天、小时、分钟还是实时迁移数据源与目的数据源之间的网络带宽数据源和集成工具之间的组网是什么样的数据库类迁移，调研表的个数，最大表的规模文件类迁移，文件的个数，有没有单文件超过TB级文件作业数量规模是多少每日作业调度次数是多少数据开发人员的数量是多少期望通过实施数据治理达到什么目标，例
2021-03-27 15:46:00
614
原创 azkaban-安装部署
下载源码git clone https://github.com/azkaban/azkaban.git修改gradle maven仓库在这里插入代码片编译cd azkaban ./gradlew clean ./gradlew distTar ./gradlew build installDist配置用户vim conf/azkaban-users.xml启动cd azkaban-solo-server/build/install/azkaban-solo-server;
2021-03-14 20:38:24
117
原创 airflow-安装部署
Aconda安装（略）MySQL安装（8.0版本以上）pip更新pip install --upgrade pippip install --upgrade setuptools依赖库安装yum install python3-develyum install libevent-develyum install mysql-develyum install -y mysql-develpip3 install pymysqlpip3 install mysqlpip3 instal
2021-03-14 20:28:26
520
原创 大数据-apache 几个兼容方案
方案 1方案 2flume-1.9.0-binhadoop-2.7.7hbase-1.4.13hive-2.3.6-binjdk1.8.0_241spark-2.4.5-bin-hadoop2.7sqoop-1.4.7tez-0.9.2-binzookeeper-3.5.7-binkafka_2.11-2.4.1方案 3Hadoop 3.1.3Flume 1.9.0Kafka 2.4.1Hive 3.1.2Sqoop 1.4.7MySQL 5.7.16Azkab
2021-03-02 06:38:07
567
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人