大数据
文章平均质量分 92
PassionZheng
这个作者很懒,什么都没留下…
展开
-
大数据数仓项目总结(一)需求、技术选型、框架版本、服务器、集群规模
文章目录一.需求描述二.架构设计三.数据采集模块搭建四.一.需求描述数据仓库( Data Waehouse ) 是为企业所有决策制定过程,提供所有系统数据支持的战略集合。通过对数据仓库中数据的分析,可以帮助企业,改进业务流程、控制成本、提高产品质量等。数据仓库,并不是数据的最终目的地,而是为数据最终的目的地做好准备。这些准备包括对数据的:清洗,转义,分类,重组,合并,拆分,统计等等。一、...原创 2020-06-04 11:24:56 · 4836 阅读 · 0 评论 -
IDEA常用快捷键
IDEA常用快捷键介绍1.IDEA常用快捷键2.常用操作IDEA内存优化查询快捷键自动代码复制快捷方式其他快捷方式下面的不是很有用1.IDEA常用快捷键快捷键功能Ctrl+G跳转到指定行Ctrl+F4关闭当前编辑页面Ctrl+F搜索Alt+回车导入包,自动修正Ctrl+N查找类Ctrl+Shift+N查找文件Ctrl+Alt...原创 2020-04-19 13:32:01 · 182 阅读 · 0 评论 -
如何查看框架的运行日志
解决问题的关键:日志一.发现问题:查看运行日志,并找到问题找到日志:a. 框架是tar包解压的->去找它的log4j.properties文件,或者在框架解压目录下,或者/tmpb. 框架是rpm包安装的->去/var/log目录下找日志c. 实在找不到,百度一下二.分析原因根据日志级别与日志内容分析问题原因怎么看日志:a. 不要用vim看日志.b. 用t...原创 2020-04-05 14:14:25 · 515 阅读 · 0 评论 -
大数据开发面试指南
大数据开发面试指南写在前面1.Java 基础篇语言基础锁多线程并发容器(J.U.C)2.Java 进阶篇JVMNIORPC3.Linux 基础4.分布式理论篇5.大数据框架网络通信基石——Netty6.离线数据存储——HadoopMapReduceHDFSYarn7.OLAP 引擎 Hive8.列式数据库 Hbase9.分布式消息队列 Kafka10.Spark11.Flink12.大数据算法关于...原创 2020-03-12 14:45:35 · 1310 阅读 · 0 评论