weixin_40595394-CSDN博客

原创 Centos7下安装Gult

1.创建linuxtech.repocd /etc/yum.repos.dvim linuxtech.repo[linuxtech]name=LinuxTECHbaseurl=http://pkgrepo.linuxtech.net/el6/release/enabled=1gpgcheck=1gpgkey=http://pkgrepo.linuxtech.net/el6/release/RPM-GPG-KEY-LinuxTECH.NET2. freeglut安装 yum instal

2021-08-26 03:23:44 297

原创 Linux下安装配置Hive

1. 安装和配置MySQL安装和配置MySQL2. 安装hivehive安装包下载地址# 解压hive[ho@ho ~]$ tar -zvxf apache-hive-2.3.7-bin# 配置环境变量[root@ho ~]# vim /etc/profile# 增加内容如下：# HIVE_HOMEexport HIVE_HOME=hive放置的地方export PATH=$HIVE_HOME/bin:$PATH3. 配置hive3.1 复制配置文件[root@ho apac

2021-01-19 02:00:50 180

原创 Centos7下MySQL的安装配置

1. 卸载已经安装的MySQLrpm -qa | grep -i mysql# 出现以下情况，则需进行下面的步骤[root@ho ho]# rpm -qa | grep -i mysqlmysql57-community-release-el7-11.noarchmysql-community-libs-5.7.32-1.el7.x86_64#######rpm -e mysql-community-libs-5.7.32-1.el7.x86_64# 一般删除，如果提示依赖的其他文件，

2021-01-16 02:47:10 122

原创基于Centos7的Spark分布式集群搭建

1. 准备工作在搭建Spark分布式集群环境之前，先要完成Hadoop分布式集群环境的搭建。Hadoop分布式集群环境构建https://blog.csdn.net/weixin_40595394/article/details/1054105432. 安装SparkSpark安装包：https://pan.baidu.com/s/1vGn6KcKAYTKu9P6YcFpajg 提取码：k...

2020-04-14 02:44:26 350

原创基于Centos7的Hadoop分布式集群搭建

1. 创建hadoop用户为每台机子创建一个hadoop用户，并且用户名和密码一致[root@localhost hadoop]# useradd hadoop[root@localhost hadoop]# echo "hadoop"|passwd --stdin hadoop # echo "yourpassword"|passwd --stdin username2. 配置hos...

2020-04-12 02:19:35 224

原创在Linux的PyCharm下配置Spark环境

在系统中安装好Spark，为了方便程序的编写，调试和结果的查看，在Pycharm中配置Spark环境1. 创建新的文件夹2. 安装好各种依赖包File ⟶ Settings ⟶ Project ⟶ Project Interpreter主要是pyspark和py4j3. 编辑Configuration点击右上角编辑ConfigurationConfiguration ⟶ Envi...

2020-03-26 01:02:31 596

原创爬取淘宝商品评论信息

爬取淘宝商品评论信息近期学期需求，需要获取部分商品的评价信息。在此记录本次学习的过程。找到URL由于这是一个动态网页，因此需要找到评论实际的URL首先进入你需要的商品的页面，按F12进入开发者工具点击累计评价，在Preview中找到评价信息源码...

2020-03-25 22:55:01 1601

原创 Centos 设置中文输入法

问题描述每次重启系统后，无法输入中文，需要重新设置解决方法1. 设置中文输入法![在这里插入图片描述](https://img-blog.csdnimg.cn/2020031617545574.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ub...

2020-03-16 18:25:37 471

原创 Centos7 安装Python3并设置Python3为默认的Python版本

Centos7 安装Python3并设置Python3为默认的Python版本注：不建议把系统默认的Python换成Python3，因为yum源依赖Python2，更换后很麻烦python3 -V 查看Python的版本打开termina进入root模式安装依赖包yum -y groupinstall "Development tools"#若此处出现错误可以忽略yum -y ins...

2020-01-07 16:57:49 2045

weixin_40595394的博客