![](https://i-blog.csdnimg.cn/direct/6126acbfad0342f990d01b25ba2303dc.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据运维及大数据基础
文章平均质量分 94
大数据相关
3分云计算
3分钟云计算,带给你不一样的体验 。
注: 我学的挺多的,大数据运维和云计算运维都学了,大概所有高级运维的终点都是共通的 ,大数据运维和云计算运维的终点前沿技术,目前都是 k8s
希望大家共同努力共同进步,评论区可以讨论交流
展开
-
Git 安装与使用详解 |Git基本词汇概念 |常用Git命令 |工具使用 |Git Extensions 的安装汉化 |小白新人 初学者 必看 |git 入门指南
Git是目前最流行的分布式版本控制系统之一。无论你是开发还是运维,测试 ,公司必然会用到Git或SVN,,本文描述了git的很多干货都是压箱底的东西。。 GitHub Desktop、GitKraken、SourceTree和Visual Studio Code都支持跨平台使用,可以在Windows、macOS和Linux上运行。选择哪个工具取决于你的个人偏好、项目需求以及你对工具的熟悉程度。对于初学者来说,建议尝试几个不同的工具,找到最适合自己的那一个。原创 2024-08-29 20:49:04 · 2404 阅读 · 15 评论 -
MySQL 基于GID 的一主两从| 修改虚拟机uuid |修改MySQLuuid| 主从复制的一些概念| MySQL 配置GID 模式的一主一从 |使用NTP来进行集群时间同步|本文章已上全站总榜|
本文章已上全站总榜 MySQL 配置基于GID 模式的一主两从 修改虚拟机uuid 修改MySQL uuid 主从复制的一些概念 MySQL 配置基于GID 模式的一主一从 NTP 来进行时间同步,同步集群时间原创 2024-08-26 11:50:01 · 2136 阅读 · 22 评论 -
火绒使用详解 为什么选择火绒?使用了自定义规则及其高级功能的火绒,为什么能吊打卡巴斯基,360,瑞星,惠普联想戴尔的电脑管家等?
注意:使用了自定义规则及其高级功能的火绒,再配合windows自带的防火墙,高级mars防护策略和DefenderUI ,可防住99%的病毒,97%的木马注意注意 : 如果不会使用高级功能那么不要下载火绒,没有自定义规则和高级功能的火绒,啥病毒都防不住 那么,,,此时,,,我建议你下载一个你买的电脑品牌对应的电脑管家,电脑管家配合windows自带杀毒功能已经可以杀死89%的病毒,70%的木马。原创 2024-08-22 19:20:12 · 2210 阅读 · 7 评论 -
liunx 上python编译安装| 用Anaconda同时安装运行多个不同版本的python环境| 在CentOS 7上安装Python 3.7| 汉化 python| 均无误,已测试运行成功
python编译安装或使用Anaconda同时安装运行多个不同版本的python环境两个方法均无误,已测试安装成功原创 2024-08-22 08:25:18 · 1697 阅读 · 18 评论 -
新手/小白看/java 一些基础问题 学生管理系统的设计
新手/小白看/java 一些基础问题 学生管理系统的设计原创 2024-08-21 15:57:09 · 1729 阅读 · 9 评论 -
MySQL 安装 小白/新手入门 yum 安装MySQL 配置yum 安装MySQL5.7 yum 安装指定版本的MySQL 修改主机名 配置静态DNS解析 关闭防火墙及内核防火墙 设置出入站规则
MySQL 安装 小白/新手入门 yum 安装MySQL 配置yum 安装MySQL5.7 yum 安装指定版本的MySQL 修改主机名 配置静态DNS解析 关闭防火墙及内核防火墙 设置出入站规则安装MySQL:配置安装源 :配置yum 安装MySQL指定版本所用的yum 仓库源原创 2024-08-20 20:29:12 · 1634 阅读 · 9 评论 -
sublime text 4 安装 安装 汉化 绿色以及Sublime Text 4 的操作指南
sublime text 4 安装 汉化 以及某某xx 和 Sublime Text 4 的操作指南原创 2024-08-14 21:52:28 · 2972 阅读 · 21 评论 -
Kettle PDI小白新手/进阶/必备 大数据基础之一数据清洗(ETL)基础进阶总结 1.6万字长文 附带大数据流处理和批处理的定义,Spark,Flink和Storm优缺点和适用场景 混合处理模式
与大数据平台集成是kettle的一个重要应用场景 这篇是针对向高级数据清洗工程师进阶的一种指路教程数据基础必备技能之一数据清洗 (ETL) 数据清洗和质量控制是数据处理过程中的关键环节,Kettle 是一个开源的数据集成工具,主要用于 ETL(抽取、转换、加载)过程。它的名字PDI,而 Kettle 是其早期的名字Kettle PDI小白新手/进阶/必备 大数据清洗(ETL)基础进阶总结 将近1.7万字长文 附带大数据流处理和批处理的定义,Spark,Flink和Storm优缺点和适用场景 混合处理模式原创 2024-08-17 16:48:25 · 2727 阅读 · 15 评论 -
mysql 物理备份 MySQL 全量备份 增量备份 差异备份 日志备份万字长文 1.3万字
版权声明:本文为博主原创文章,遵循版权协议,转载请附上原文出处链接和本声明注意,通常 完备增备,日志(binlog)备,结合使用 差异则根据具体情况选用。此备份过程属于公司 常用的单个数据库备份技术中的mysql 物理备份 MySQL 全量备份 增量备份 差异备份 日志备份至于单个数据库备份技术中的逻辑备份和混合数据库及其备份技术,本人会另外开文章再进行说明原创 2024-08-15 22:53:45 · 2460 阅读 · 22 评论 -
配置MySQL主从,配置MySQL主主 +keeplive高可用
注意:这个是我两年前的word文档,可以当作参考文档有个思路参考一下,但是里面可能有些地方有误原创 2024-08-14 09:00:00 · 1586 阅读 · 9 评论 -
Centos 7.9 安装 图解版 小白必看 最新
VMware安装win7用 12win10 用 15win11用 16.2.4别问为什么,问就是win和VMware不兼容导致虚拟机各种奇葩异常,重装集群了这已经是我当年实验了20多次得出的结果,最佳兼容性搭配。原创 2024-08-13 20:25:10 · 2168 阅读 · 3 评论 -
centos7配置yum源 安装 docker 安装Docker Compose 安装Python 3.7并汉化 (python可不安装) 使用Harbor配置部署docker本地仓库
docker官网已很难访问 以前简单几个步骤拉取镜像的时光已不再另外,安装一个软件确认无误就执行备份 ,在关键步骤之前一定做好备份以防止重来,造成时间的大量浪费注意有时因各自网络环境原因,wget显示拒绝连接,要么等五分钟再试要么就 把网址粘贴到百度去下载相对应的安装包,通过ftp,xftp等拷贝到虚拟机中。 若有问题欢迎评论留言,我会尝试解决。原创 2024-08-12 22:06:26 · 2290 阅读 · 10 评论 -
ssh 远程 报错 解决方案 centos 无法远程 另外附带-免密登录 免密码跳转堡垒机教程
ssh 远程 报错 解决方案 centos 无法远程 另外附带-免密登录 免密码跳转堡垒机教程原创 2024-08-11 23:56:54 · 1232 阅读 · 11 评论 -
Hadoop大集群配置文档-粗略版-3万字长文 (包括hive,zookeeper,hbase,flume等中间件和mysql等)
还要整理spark,所以这篇运维配置文档就先到这里吧 ,我先在已经在磕云计算了,再不整理下就忘光了hhh原创 2024-08-09 20:48:03 · 2102 阅读 · 5 评论 -
服务器是5台64G的 ,doris写入300亿数据写不进去,爆内存怎么弄?我的思路如下:
doris写入300亿数据写不进去,爆内存怎么弄?我的思路如下原创 2024-08-08 21:05:59 · 1216 阅读 · 3 评论 -
如何用sql在1分钟从1T数据中精准定位查询?Hive离线数仓 Spark分析
在大数据-Hadoop体系中 ,spark批处理和hive离线数仓可以说是对立并行的两个大分支技术栈,,,建议主攻其一,另一个灵活使用就行。他们是2015出现在国内,2017年之后国外各大公司纷纷采用,国内2020采用的,目前属于很前沿,并且很主流,很顶层的技术。(注:19年国内云计算开始起势,大数据的发展与云计算和人工智能等密切相关,更离不开芯片,硬件存储技术等相关支撑,它们之间相辅相成原创 2024-08-07 20:30:38 · 3733 阅读 · 14 评论