![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据学习
文章平均质量分 86
wei404434065
这个作者很懒,什么都没留下…
展开
-
数据分层的理解
数据分层前言最近在学习大数据的课程,并且自己也有一些数据开发的经验。因此将自己对数据分层的一些理解写下来作为笔记,供后续参考。数据仓库分层的目的初次在项目中接触数据分层,架构师告诉我们说分层是为了解耦,并且数据只能引用上一层的数据(ods->cdm->ads),绝对不允许跨层引用。当时表示不解,这不是多此一举吗,知道我参加项目才理解了一二。要知道为什么分层,首先得了解有哪些层,一般大的层有这三个:ODS\CDM\ADS,在这些层里又分为很多的更细粒度的层。ODS层ODS层是接入数原创 2022-03-20 13:20:53 · 3264 阅读 · 0 评论 -
利用闲置电脑安装虚拟机搭建hadoop集群
大数据学习准备文章目录大数据学习准备前言一、pandas是什么?二、使用步骤1.引入库2.读入数据总结欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入前言提示:这里可以添加本文要记录的大原创 2022-03-20 11:13:50 · 4618 阅读 · 0 评论 -
使用python的pandas包查询数据库数据导出到excel
使用python的pandas包查询数据库数据导出到excel前言前几天接到一个业务的需求,让我把当前数据库里面的结果数据导出到excel中,然后供业务查看。问题是当前结果数据都是列式表,所以需要把数据做一个行列转换,但是业务还有一个需求,要求不同分类的数据展示不同的列并且需要导出到不同的sheet中。没办法,只能去思考怎么实现。#博学谷IT学习技术支持#数据大概长这样:idcategorykeyvalueid1分类1属性1值id2分类1属性5值id原创 2022-03-20 12:27:40 · 7724 阅读 · 0 评论