![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 50
wangnan229
一个奔四的数据库开发攻城狮
展开
-
记一次MongoDB数据库恢复过程
一看,确实是个None。公司的K8S集群里面跑着一个MongoDB服务,今天小伙伴问我怎么登录上去后数据啥都没有,这把我问懵逼了,赶紧上去看看。后记:得亏还有个之前的mongodb服务留下的data目录可以用,要不然真的就麻烦了。然后删除mongodb的Pod,等待重建,Mongodb服务就恢复了!原创 2023-08-07 17:35:12 · 101 阅读 · 0 评论 -
Kettle变量名,区分大小写!
Kettle 中,不管是Job还是transformation,变量参数都是大小写敏感!!今天各种调试都不好使,原理是因为默认参数都是大写!!原创 2021-07-15 13:22:43 · 922 阅读 · 0 评论 -
sqoop抽取数据样例
MySQL:import --connect jdbc:mysql://192.168.11.2:3306/bookstack?characterEncoding=utf8 --username root --password 0000 --query “select concat(document_id,’=’,markdown,’=’,content,’+++’)content from md_document_store WHERE $CONDITIONS” --target-d原创 2022-02-11 14:24:20 · 1316 阅读 · 0 评论 -
数据仓库随手收集
https://blog.csdn.net/qq_26442553/article/details/79318165数据仓库的分层:SOR层、SMA层类似于现平台中的 dl层(原始明细层、整合后的明细层),DM层是展示层。https://blog.csdn.net/zhaodedong/article/details/73385647数据分层:ODS层(经过清洗转换的明细)、DW层(面向主题的模型)、APP层(展示结果)https://segmentfault.com/a/11900000128原创 2022-02-11 14:20:34 · 619 阅读 · 0 评论 -
Hadoop平台CDH介绍
文章目录Hadoop平台CDH简介安装应用Hadoop平台CDH简介CDH是Cloudera开发的基于Hadoop生态的一系列组件的组合,简化了Hadoop生态各个组件的版本匹配及安装、集群管理、监控等。如果实时性要求不是很高,可以使用Hadoop平台,比如CDH。通过定时ETL,将在MySQL表抽取至Hive数据仓库,然后使用Impala代替MySQL快速完成复杂查询的任务。也可以将部分耗时多的处理复杂逻辑的作业转移至CDH进行计算,从而大大减轻MySQL的压力。安装CDH目前有5、6两个大版本原创 2020-06-18 18:10:45 · 1905 阅读 · 0 评论