自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(95)
  • 问答 (1)
  • 收藏
  • 关注

原创 docker部署调度程序

Dockerfile(构建初始镜像)

2024-05-11 15:05:49 249 1

原创 使用paramiko从远程服务器下载文件和文件夹

【代码】使用paramiko从远程服务器下载文件和文件夹。

2024-01-08 18:11:08 542

原创 linux环境下--使用python进行ssh传输

【代码】linux环境下--使用python进行ssh传输。

2023-12-07 20:13:42 419

原创 shell常用操作

【代码】shell常用操作。

2023-11-07 11:43:44 135

原创 pandas参照一个文件,根据id来判断存在,修改另一个文件的字段

【代码】pandas参照一个文件,根据id来判断存在,修改另一个文件的字段。

2023-11-03 09:20:41 107

原创 pandas使用实例:at的使用,编写修改每行字段

pandas

2023-09-15 09:47:30 68

原创 blender--已知三个点,计算三个点组成的三角形的法线向量

计算三角形的法线向量

2023-08-07 09:02:42 402

原创 hive on spark模式spark的配置

在hdfs上创建历史日志存放目录。

2023-06-18 22:56:22 526

原创 hive on spark模式hive的配置

hive on spark模式hive的配置

2023-06-18 22:48:05 208

原创 centos8 安装flume

配置文件可以去官方文档那里参考。

2023-06-16 17:43:24 133

原创 centos8安装redis

mkdir {conf,data} # conf 配置文件目录 data 数据存放目录 log日志文件目录。logfile “redis.log” # 指定logfile的文件名 默认没有日志文件。redisprotected-mode no # 关闭保护模式。bind 0.0.0.0 # 配置可以所有的地址都可以访问。dir ./data # 相关的数据和日志文件的存放目录。dbfilename dump.rdb # 数据文件存放。daemonize yes # 后台启动运行。

2023-06-16 16:32:33 1016

原创 大数据环境搭建:基于cenotos8

配置静态ip;设置ssh免密登录linux分发脚本centos8同步上海时间centos8安装mysql5.7hadoop安装与配置

2023-06-16 15:17:15 61

原创 hadoop配置

hadoop相关配置

2023-06-16 15:14:29 477

原创 centos 8安装mysql5.7

centos8安装mysql5.7

2023-06-16 14:01:07 412

原创 spark on hive的实现

spark on hive的实现

2023-06-09 16:09:15 165

原创 sql的窗口函数

sql的窗口函数

2023-06-09 10:09:20 87

原创 sparkSQL的使用

sparksql的使用

2023-06-08 19:56:37 687

原创 spark的高阶用法

spark的高阶用法

2023-06-08 15:27:21 470

原创 压榨spark集群性能

spark压榨性能分析

2023-06-08 12:29:26 54

原创 spark简单的使用案例

spark简单案例

2023-06-08 12:13:42 61

原创 spark的使用

spark使用和相关的算子

2023-06-08 10:30:10 840

原创 Failed to submit application_1618751895029_0003 to YARN : root is not a leaf queue

root is not a leaf queue

2023-06-07 14:16:39 295

原创 hadoop和hive启动流程及各个端口

hadoop/hive启动流程

2023-06-05 19:14:11 364

原创 hive数据库的使用

hive数据库的使用

2023-06-02 18:44:58 176

原创 hive的安装及相关命令

hive的安装于使用

2023-06-01 19:12:18 417

原创 mapreduce的配置及yarn的部署

mapreduce的配置及yarn的部署

2023-06-01 13:09:51 241

原创 centos8配置静态ip,关闭防火墙,免密登录

hadoop环境配置及HDFS配置

2023-06-01 13:03:12 762

原创 hadoop命令汇总

hadoop命令汇总

2023-05-31 17:07:24 1919

原创 linux分发脚本

linux分发脚本

2023-05-29 11:34:42 289

原创 通用配置使用yml读取config

通用配置使用yml读取config。

2023-05-11 10:08:36 346

原创 ElementTree生成xml文件

ElementTree生成xml文件。

2023-05-09 10:27:02 222

原创 PyYAML的使用---使用xx.yml充当配置文件

PyYAML的使用,xxx.yml充当配置文件。

2023-04-20 10:06:22 112

原创 pysmb库SMBConnection的使用

pysmb库SMBConnection的使用

2023-04-20 09:58:10 1785

原创 os.path的用法

os.path的用法。

2023-02-22 18:17:53 79

原创 property的使用

property(获取, 修改, 删除, 备注)

2023-02-22 15:35:44 61

原创 glob.glob()的使用

【代码】glob.glob()的使用。

2023-02-22 15:06:17 120

原创 git 拉取子项目

git 拉取子项目

2023-02-20 18:23:00 211

原创 docker构建FastDFS

FastDFS的配置

2023-02-06 17:53:55 133

原创 python 钩子函数hook的理解

【代码】python 钩子函数hook的理解。

2023-01-05 11:45:48 478

原创 python装饰器的理解

装饰器的作用:是在不改变函数功能的基础上添加某项功能。

2023-01-05 11:36:03 58

hive-sql语法大全

hive-sql语法大全

2023-06-15

大数据整理hadoop/hive

大数据整理hadoop/hive

2023-06-15

spark简单的使用案例

spark简单的使用案例

2023-06-08

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除