WeixinX_-CSDN博客

原创 Linux JKD1.8 安装及配置

1、下载JDK1.8下载地址：https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html以下用的是jdk8u141，差别不大2、上传压缩包在这里使用xftp上传压缩包3、解压压缩包位置以 /root/workstation/tool 为例解压的目标位置以 /root/workstation/soft 为例(位置均以各位实际为准)进入压缩包所在位置cd /root/workstation/t

2021-03-12 16:16:26 623

原创 Linux Tomcat 安装

以 Tomcat 8.5 为例1、下载Tomcat下载地址:https://tomcat.apache.org/download-80.cgi2、上传（若不清楚的请自行搜索xshell、xftp的使用）3、解压首先进入tomcat压缩包所在文件夹位置（以/root/workstation/tool为例）cd /root/workstation/tooltar -zxvf apache-tomcat-8.5.64.tar.gz -C /root/workstation/soft

2021-03-12 15:42:00 106

原创 CentOS7 安装图形界面及远程连接

使用的是腾讯云CentOS7.8 64位服务器1、查看分组yum grouplist2、安装GUI图形界面选择grouplist中的 GNOME Desktop 进行安装yum groupinstall “GNOME Desktop”3、设置默认运行级别ln -sf /lib/systemd/system/graphical.target /etc/systemd/system/default.target4、查看默认运行等级systemctl get-default显示 gra

2021-03-12 14:45:45 1336

原创 CentOS7 MySQL安装（RPM方式）

1、下载并上传MySQL rpm安装包下载地址：https://dev.mysql.com/downloads/mysql/使用xftp上传MySQLrpm安装包（关于如何使用xshell、xftp请自行搜索）2、检测本地是否有MySQL已存在的包rpm -qa | grep mysql若查询出文件，用一下指令删除rpm -e --nodeps 查询出的文件名3、解压安装包tar -xvf mysql-5.7.33-1.el7.x86_64.rpm-bundle.tar -C /

2021-03-11 22:58:24 159

原创 Ubuntu18 MySQL 安装 Navicat连接

Ubuntu18 MySQL 安装 Navicat连接1、安装sudo apt-get install mysql-serversudo apt-get install mysql-client sudo apt-get install libmysqlclient-dev2、查看默认账号和密码sudo vim /etc/mysql/debian.cnf选取其中的user、password，以上图（具体根据自己的）user = debian-sys-maint passw

2021-03-11 21:54:14 278

原创大数据学习-Spark算子（三）之RDD的其他操作

Spark算子（三）之RDD的其他操作大数据学习-Spark算子（一）之基本RDD操作大数据学习-Spark算子（二）之Pair RDD操作文章目录Spark算子（三）之RDD的其他操作5、RDD的其他操作1）`glom()`：2）`getNumPartitions()`：3）`coalesce(numPartitions,shuffle=False)`：4）`repartition(numPartitions)`：5）`cache()`：6）`persist()`：7）`pipe(command,[

2020-09-10 20:51:26 236

原创大数据学习-Spark算子（二）之Pair RDD操作

Spark算子（二）之Pair RDD操作Spark算子（一）之基本RDD操作文章目录Spark算子（二）之Pair RDD操作3、Pair RDD的转化操作1）`reduceByKey(func)`：2）`groupBy(func)`：3）`groupByKey()`：4）`combineByKey(a1,a2,a3,a4,a5)`：5）`mapValues(func)`：6）`flatMapValues(func)`：7）`keys()`：8）`values()`：9）`sortBy(func,as

2020-09-10 20:46:29 165

原创大数据学习-Spark算子（一）之基本RDD操作

Spark算子（一）之基本RDD操作参考书籍《大数据技术与应用》肖政宏李俊杰谢志明编著Spark算子大致分为转化（Transformation）和行动（Action）两类。1）Transformation：不触发提交作业，完成作业中间过程处理。函数包括：map、filter、flatMap、groupByKey、aggregateByKey、pipe和coalesce等。2）Action：会触发SparkContext提交作业（job）。函数包括：reduce、collect、count、

2020-09-10 20:42:52 172

原创大数据学习-Spark环境配置&官方示例SparkPi

Spark环境配置文章目录Spark环境配置1、压缩包下载2、解压安装3、修改配置文件1）添加环境变量2）配置spark-env.sh文件3）配置slaves文件4、启动spark集群1）启动hadoop2）启动spark3）查看进程4）查看spark集群运行信息1、压缩包下载scala下载地址：https://www.scala-lang.org/download/所选择版本为 scala-2.13.3.tgzspark下载地址：http://spark.apache.org/downloads

2020-09-09 17:25:52 1440

原创大数据学习-HBase Shell命令

HBash Shell命令文章目录HBash Shell命令一、DDL操作1、list：查看HBase中的所有表2、create：创建表3、describe：查看表的详细信息4、alter：修改表的列族信息5、disable：禁用表6、enable：启用表7、drop：删除一张表8、exists：查看表是否存在二、DML操作1、put：添加数据2、scan：查询整张表或者列族的数据3、get：获取行或者单元的值4、delete：删除数据5、truncate：删除表中所有数据进入HBash Shell：

2020-09-08 17:08:27 246

WeixinX_的博客