大数据学习笔记，学习清单

最新推荐文章于 2024-06-03 01:03:36 发布
最新推荐文章于 2024-06-03 01:03:36 发布
阅读量172 收藏
点赞数
文章标签： 大数据 学习 笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_46183404/article/details/131495077
版权

大数据目前技术组件有很多，比如有hdfs,hive,spark,flink,kafka,clickhouse,cdh,nifi,streamset等等技术，主流的开发语言有Java，Scala，Python等等开发语言，大数据SQL必须要会，MySQL和hive，click house等等SQL语言都要会，SQL语言必须要会而且要能随时写百行以上的SQL语言

下面是我整理的学习笔记和大数据学习的基本路线，对于新手入门非常友好，笔记对于面试很有帮助，需要的可以私聊一下，可以加一下扣扣1514517020，当然也可以聊一下技术

 

平凡天下
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
kafka学习笔记
weixin_41827053的博客
05-09 230
Kafka传统定义: Kafka是一个分布式的基于发布/订阅模式的消息队列(MessageQueue) ，主要应用于大数据实时处理领域。发布/订阅:消息的发布者不会将消息直接发送给特定的订阅者，而是将发布的消息分为不同的类别，订阅者只接收感兴趣的消息Kafka最新定义:Kafka是一个开源的分布式事件流平台 (Event StreamingPlatform)，被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。
Paimon 学习笔记
第一片心意的博客
08-08 3138
Apache Paimon 学习笔记，流式数据湖平台。
大数据 Hadoop 学习笔记 02
Joker的博客
12-06 890
简介： 今天来聊聊 HDFS，它是 Hadoop 分布式文件系统（HDFS）是一种旨在在商品硬件上运行的分布式文件系统。 具有高度的容错能力，旨在部署在低成本硬件上。HDFS 提供对应用程序数据的高吞吐量访问，并且适用于具有大数据集的应用程序。 从 Hadoop 的架构中看出，HDFS 是最底层存储集群中所有存储节点文件的文件系统，犹如一座大厦的地基。 01-HDFS 架构 HDFS 总体上采...
大数据秋招学习笔记1
qq_44427262的博客
08-03 161
Hadoop基础知识： 1）bigdata特点：4V，大量(volume)，高速(velocity)，多样性(variety)，低价值密度(value)。 2）Hadoop是Apache基金会开发的分布式系统基础架构，主要用于解决海量数据的存储和分析计算问题，广义上通常指Hadoop生态圈。 3）Hadoop1.* 和 Hadoop2.* 的区别：Hadoop1.* 中的Mapreduce同时负责业务逻辑计算与资源的调度，Hadoop2.* 中增加了Yarn，Yarn负责资源调度，Mapreduce只负责运
大数据学习笔记(HDFS常用操作)
smy12138的博客
11-13 181
1、创建目录命令 HDFS有一个默认的工作目录/user/USER，其中USER，其中USER，其中USER是用户的登录用户名。不过目录不会自动建立，需要mkdir建立它 命令格式：hadoop fs -mkdir 如： 在user目录下创建chen目录 hadoop fs -mkdir /user/chen 注意：Hadoop的mkdir命令会自动创建父目录，类似于带-p的ＵＮＩＸ命令 ２、上传...
Redis_学习笔记（2024.04）
dameizizizi123的博客
04-02 500
技术的分类解决功能性的问题：Java、Jsp、RDBMS、Tomcat、HTML、Linux、JDBC、SVN解决扩展性的问题：Struts、Spring、SpringMVC、Hibernate、Mybatis解决性能的问题：NoSQL、Java线程、Hadoop、Nginx、MQ、ElasticSearchWeb1.0时代Web1.0的时代，数据访问量很有限，用一夫当关的高性能的单点服务器可以解决大部分问题。Web2.0时代。
CISA注册信息系统审计师学习笔记：第四章——信息系统运维和业务恢复能力
最新发布
AlanLafayette的博客
06-03 260
任何存储设备都可以是让其他计算机感染恶意软件的载体。灾难恢复计划包括了一个离主数据中心足够远的支持在灾难发生时恢复的热站，热站的位置与主设备的距离应该大于500米，热站通常使用在低恢复时间目标（但是没有冗余站点快）的关键应用系统上，磁盘空间不充足非常危险。对于容许有较长恢复期的高回复时间目标的敏感系统在可接受的成本上可以通过人工方式执行恢复，对于这样的系统冷站（不提供组件）提供了成本效益最佳的解决方案。虽然一个暖站（可以进行简单操作）可以提供较好地解决方案，但它不是更适当的，因为与冷站相比更昂贵。热、冷、暖
大学四年我这样学习大数据技术，成为了别人眼中的大神
热门推荐
yuan_more的博客
05-15 1万+
在大学里，千万不要老师教什么，你就只学什么，这是远远不够的，对于我们大数据专业，甚至整个计算机专业的同学来说，大学四年最重要的能力就是自学。大学的课程不像高中那么紧，留给我们自学的时间还是比较多的，作为大数据专业的过来人，我真诚的劝学弟学妹们一句：一定要把握住课余时间，尽量不参与或者少参与无用的社团，将这些时间都用来学习计算机相关的知识，每天都坚持学，等你毕业找工作了，或者工作几年之后回过头来看，你会感谢我的。 对于我们计算机相关的专业来说，课堂上老师教的内容只占我们要学习内容的二分之一甚至三分之一，其他
人工智能学习笔记
weixin_49662364的博客
08-01 1357
人工智能基本知识和一些经典模型。
大数据学习笔记汇总指南
03-28
一、Hadoop 二、Hive 三、Spark 四、Storm 五、Flink 六、HBase
大数据学习笔记.docx
11-09
大数据的学习笔记，从大数据的基本概念包括Hadoop、hive、离线计算、实时计算、数据库、数据仓库、维度建模、大规模并行处理MPP，到阿里大数据产品，包括MaxCompute、DataWorks、数据集成、机器学习PAI、AnalyticDB ...
大数据学习笔记
11-26
文本详细分析了hadoop的基本构成和原理，hbase的基本原理和常用命令，hive的原理和常用命令等。
BigData大数据学习笔记
01-03
BigData大数据学习笔记
大数据学习笔记.zip
08-23
大数据学习笔记 包含Hadoop Hbase kafka flume
RabbitMQ小结
javanmsl的博客
06-02 793
kafka优点：性能好，吞吐量高百万级，分布式，消息有序缺点：单机超过64分区，cpu会飙高，消费失败不支持重试 ，
apache大数据各组件部署搭建（超级详细）
weixin_43977307的博客
05-30 1748
准备3台服务器用于集群部署，系统建议CentOS7+，2核8G内存172.19.195.228 hadoop101 172.19.195.229 hadoop102 172.19.195.230 hadoop103 2. 安装包下载准备 数仓部署组件安装包： 链接：https://pan.baidu.com/s/1Wjx6TNkedMTmmnuWREW-OQ 提取码：bpk0已经把相关组件均上传至网盘，也可自行去各自官方地址去下载收集；3台机器的/etc/hosts主机名解析配置： 4. 配置服务器之间免密
深入解析CRM客户关系系统：技术架构与功能实现的融合创新
m0_65038841的博客
05-31 462
通过以上技术架构和功能实现，CRM客户关系管理系统能够帮助企业实现客户信息的集中管理、销售过程的自动化、营销活动的精准投放以及客户服务的提升，从而提高企业的市场竞争力和客户满意度。容器化与微服务：采用Docker和Kubernetes等技术，实现系统的容器化和微服务架构，提高系统可扩展性和部署灵活性。营销活动管理：创建、发布和管理各种营销活动，如优惠券、促销活动和线上线下活动等，支持活动效果分析。客户信息管理：实现对客户基本信息的录入、查询、修改和删除功能，支持多维度客户细分和标签管理。
RabbitMQ一、RabbitMQ的介绍与安装（docker）
学习笔记
06-01 1336
主要记录rabbitmq的介绍以及它在linux系统的安装
大数据技术与应用学习笔记
05-31
好的，我会尽力回答你关于大数据技术与应用的问题，以下是我的笔记： 1. 什么是大数据？ 大数据是指数据量过大、处理复杂度高、价值密度低的数据。大数据具有“3V”特征：数据量大（Volume）、处理速度快...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值