liuhanyu_
码龄5年
关注
提问 私信
  • 博客:5,916
    5,916
    总访问量
  • 17
    原创
  • 126,864
    排名
  • 44
    粉丝
  • 0
    铁粉

个人简介:如有错误之处,多谢指出。共勉之!

IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:北京市
  • 加入CSDN时间: 2020-05-22
博客简介:

liuhanyu_的博客

查看详细资料
  • 原力等级
    当前等级
    2
    当前总分
    102
    当月
    0
个人成就
  • 获得64次点赞
  • 内容获得1次评论
  • 获得37次收藏
创作历程
  • 18篇
    2024年
成就勋章
TA的专栏
  • linux
    7篇
  • spark
    2篇
兴趣领域 设置
  • 大数据
    hadoophivespark数据仓库etl
创作活动更多

2024 博客之星年度评选报名已开启

博主的专属年度盛宴,一年仅有一次!MAC mini、大疆无人机、华为手表等精美奖品等你来拿!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

filebeat

【代码】filebeat。
原创
发布博客 2024.09.15 ·
126 阅读 ·
2 点赞 ·
0 评论 ·
0 收藏

Windows 剪贴板增强工具

Ditto。
原创
发布博客 2024.09.15 ·
151 阅读 ·
3 点赞 ·
0 评论 ·
0 收藏

日志检索平台搭建

整体思路。
原创
发布博客 2024.09.15 ·
106 阅读 ·
2 点赞 ·
0 评论 ·
0 收藏

spark sql面试题 1

答案答案。
原创
发布博客 2024.09.14 ·
190 阅读 ·
3 点赞 ·
0 评论 ·
0 收藏

yum失败

问题:虚拟机yum下载出错,查看网络,发现卡住。发现自己变成下面这样。
原创
发布博客 2024.08.31 ·
130 阅读 ·
3 点赞 ·
0 评论 ·
0 收藏

Xshell设置常用的快捷键

例如:Crtl+C、Crtl+V、Crtl+F等等。3、在设置快捷键之前,需要先查看一下是否已经存在了。4、选择 “菜单” 然后在操作中选择 你要的操作。1、打开Xshell,选择“工具”->“选项”看到不存在以后,直接点击是,进行添加。2、“键盘和鼠标”->“编辑”直接在键盘上Ctrl+C。
原创
发布博客 2024.08.31 ·
718 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

持续补充中

语雀个人工作文档记录。
原创
发布博客 2024.08.22 ·
166 阅读 ·
2 点赞 ·
0 评论 ·
0 收藏

Sublime Text

最初也是不知道从何下手,满世界地查找资料,但能查阅到的资料,苦于它们的零碎、片面,不够系统和全面,所以一路走来,耗费了本人大量的时间和精力。所以蒙生了写这篇《Sublime Text 3 全程详细指南》,一来对自己的经验是一个总结,二来可以给初学者做个系统、全面的指引,让他们少走我当时走过的弯路,从而能快速地掌握Sublime Text这个优秀的编辑器。如果你的电脑平台是windows x86,也就是32位的系统,请点击“Windows”下载32位的安装程序,如果不想安装,就点击其后的“
转载
发布博客 2024.08.08 ·
1153 阅读 ·
0 点赞 ·
0 评论 ·
7 收藏

实时同步服务

1.rsync+crontab只能定时同步。解决:使用开源工具sersync。2.nfs存在单点故障问题。
原创
发布博客 2024.06.19 ·
390 阅读 ·
6 点赞 ·
0 评论 ·
6 收藏

共享存储NFS

C/S架构。
原创
发布博客 2024.06.19 ·
152 阅读 ·
2 点赞 ·
0 评论 ·
0 收藏

备份服务rsync

在服务端创建虚拟用户,密码文件,数据目录等。定时备份:crontab + rsync。cp,scp也可用于备份。
原创
发布博客 2024.06.18 ·
139 阅读 ·
3 点赞 ·
0 评论 ·
0 收藏

定时任务crond服务

作用:通过crontab 命令,我们可以在固定的间隔时间执行指定的系统指令或 shell script脚本。时间间隔的单位可以是分钟、小时、日、月、周及以上的任意组合。这个命令非常适合周期性的日志分析或数据备份等工作。
原创
发布博客 2024.06.11 ·
297 阅读 ·
7 点赞 ·
0 评论 ·
4 收藏

spark之数据源格式

在 Spark SQL 中,支持多种源数据格式,每种格式都有其特定的优势和劣势。以下是一些常见的数据格式及其特点:‎。
原创
发布博客 2024.06.07 ·
755 阅读 ·
6 点赞 ·
0 评论 ·
11 收藏

关于磁盘打满

进入到打满的目录下,查看具体是哪个文件或者目录。在大数据场景下,一般是某个服务的日志保留时间比较长,占据空间大,删除旧的日志数据即可。特殊:df的结果和du的结果相差很大。解决:找到文件对应服务,重启服务。原因:某些文件的调用数不为0。查看机器的哪个盘出现打满。
原创
发布博客 2024.06.06 ·
221 阅读 ·
3 点赞 ·
0 评论 ·
0 收藏

spark日期函数

将Unix时间戳转化为日期格式。指定日期加减天数后返回的日期。返回一个Unix时间戳。
原创
发布博客 2024.05.31 ·
161 阅读 ·
4 点赞 ·
0 评论 ·
0 收藏

正则表达式

前一个字符连续出现至少n次,最多m次。匹配的空字符 空格 tab 等等字符。前一个字符连续出现0次或0次以上。前一个字符连续出现1次或1次以上。前一个字符连续出现,最多m次。前一个字符连续出现至少n次。前一个字符出现0次或1次。排除数字,大小写字母和_以......开头的行。以......结尾的行。前一个字符连续出现n次。
原创
发布博客 2024.05.24 ·
181 阅读 ·
1 点赞 ·
1 评论 ·
0 收藏

进程管理_spervise

supervise的执行命令是supervise Path ,其中Path 是指定路径,可以是相对路径,也可以是绝对路径。在Path路径下,必须有一个run的脚本,supervise调用的就是这个脚本,并监控管理该脚本中运行的程序。supervise的一个重要的功能就是可以检测出run脚本中执行的程序是否正常工作,若发现其已经死掉,supervise将会重新执行 run脚本,重新启动指定程序。
原创
发布博客 2024.05.20 ·
181 阅读 ·
3 点赞 ·
0 评论 ·
0 收藏

/dev/null

在 Linux 系统中,/dev/null 是一个特殊的文件,没有任何数据,读取它永远不会产生任何输出,写入它永远不会导致任何数据被存储。最终结果:标准错误输出和标准输出均重定向到/dev/null,因此,即使命令本身存在错误,也不会在屏幕上显示任何输出。标准输出重定向到/dev/null,标准错误输出重定向到标准输出,而前面标准输出已经重定向到/dev/null。/dev/null 被用作输入流,该命令不会等待任何输入,而是立即退出。输出被重定向到 /dev/null,因此不会在屏幕上打印任何输出。
原创
发布博客 2024.01.24 ·
693 阅读 ·
13 点赞 ·
0 评论 ·
9 收藏
加载更多