- 博客(7)
- 收藏
- 关注
RSS订阅原创 superset安装和部署(超详细)
Apache Superset是一个开源的、现代的、轻量级BI分析工具，能够对接多种数据源、拥有丰富的图表展示形式、支持自定义仪表盘，且拥有友好的用户界面，十分易用。
2023-11-21 15:32:34
8160
10
原创 python中pip和pip3的区别、使用以及加速方法
由于 Python 3.x 与 Python 2.x 在语法和库方面存在一些不同，为了避免混淆，Python 3.x 版本引入了。本文将介绍它们之间的区别、基本使用方法以及如何加速包的安装过程。在Python开发中，包管理是至关重要的一部分。在 Python 3.x 环境中，使用。你可以使用以下命令来列出已安装的包。在 Python 2.x 中是默认安装的。在 Python 3.x 中是默认安装的。来安装和管理 Python 包。来安装和管理 Python 包。安装pip和pip3。跟新pip和pip3。
2023-11-10 14:33:11
2510
1
原创 在hive插入数据时出现“Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask”报错
运行Tez时检查到用过多内存而被NodeManager杀死进程问题设置hive的执行引擎
2023-11-04 18:28:23
8311
1
原创 网络爬虫原理与流程详解
在爬取之前，你可以检查要爬取的URL是否已经存在于哈希集合中，如果存在则忽略，如果不存在则添加到待爬取的URL列表和哈希集合中。这样，当你重新启动爬虫时，可以加载之前保存的URL列表，继续爬取未完成的任务。它们根据不同的数据模型进行存储和检索，如文档数据库、键值数据库、列族数据库和图数据库，适用于大规模、分布式和快速读写的场景。云平台提供的数据库即服务（如Amazon RDS、Google Cloud SQL、Azure Database）将数据库管理的任务转移到云端，简化了部署、配置和扩展数据库的过程。
2023-10-05 22:47:49
2892
原创 hadoop集群搭建（一）（超详细）
在hadoop02和hadoop03进行检查hosts是否拷贝成功（由于作者隐私问题在这里对ip进行大码，大家做的时候要保证ip和虚拟机保持一致）在根目录opt下分别创建local和soft文件夹，local用来存放上传的压缩包，soft用来存放解压之后的文件。将文件解压到 opt下的soft(解压过程中不能做其他的事情，容易解压出错！编辑好配置文件后“Esc”退出编辑模式。双击打开安装包，进行傻瓜式安装。进入opt下的local文件夹。安装完成，点击 “关闭”按“i”进入编辑模式。
2023-09-24 12:13:23
431
1
原创 linux系统环境配置
1.使用“su -”命令切换root用户。（3）修改完成后重启网络服务，使修改生效。（1）查看自己的IP，掩码， 网关。编辑完成后按“Esc”退出编辑模式。进入文件后按“i”进入编辑模式。(3)重启系统，使修改生效。（2）禁止防火墙开机启动。（2）修改ip配置文件。输入“：wq”保存退出。(3)查看防火墙状态。
2023-09-16 11:38:13
524
原创 linux创建虚拟机成功后，第二次使用打不开，(磁盘和文件权限修改)
正常情况下只需要点击 >浏览，重新选中找不到的文件即可。选中Hadoop01文件>鼠标右键>属性>安全>编辑>完全控制>确认。就说明文件的权限太高，或者存放文件的磁盘权限太高，导致无法访问文件。即完成对权限的修改（同理，磁盘权限也可按照此方法修改）>替换缺少的文件时出错: 权限不足，无法访问该文件。这时我们需要对文件和磁盘的权限进行修改。二次使用虚拟机出现如图所示提示。
2023-09-08 17:42:32
173
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人