m0_53864079的博客

大数据架构演变

Linux是一套免费使用和自由传播的类Unix操作系统，是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的UNIX工具软件、应用程序和网络协议。linux诞生于1991年，由芬兰大学生linus和后来众多的爱好者共同开发完成。

1. 向列表中追加一个元素：append 语法：列表.append(元素) 2. 将数据容器的内容以次取出，追加到列表尾部：extend 语法：列表.extend(容器) 3. 在指定下标处，插入指定的元素：insert语法：列表.insert(下标，元素) 4. 删除列表指定下标元素：del 语法：del 列表(下标) 5. 删除列表指定下标元素：pop语法：列表.pop(下标) 6. 从前向后，删除此元素第一个匹配项：remove语法：列表.remove(元素) 7. 清空列表

复制完地址回到linux系统通过wget命令，粘贴复制的下载链接进行下载。登录到Linux中，使用yum程序进行依赖程序安装，执行如下命令。在Linux系统下安装python需要先安装前置依赖程序。官网连接：https://www.python.org/依赖程序安装完后就可以进行python的安装了。下载python可以到python官网下载。解压后得到Python-3.10.4文件夹。早到需要下载的版本这里以3.10.4为例。下载完后查看下载好的安装包文件。点击进去之后滑倒最下面如图所。

（7）systemctl is-enabled firewalld.service查看防火墙是否开机启动；（1）systemctl status firewalld.service查看防火墙的状态；（6）systemctl disable firewalld.service开机禁用防火墙；（5）systemctl enable firewalld.service开机启动防火墙；（2）systemctl start firewalld.service启动防火墙；

概念：安全的超文本传输协议（传输时对数据进行加密）概念：就是服务器与客户端进行数据交互的一种形式。

执行完之后ctrl+c退出就完成了，然后再回到DataGrip查看元数据就没乱码了。（注意：这里你要把之前的表删除了重新建，然后再查看，因为之前的元数据已经存储进去了乱码的形式，所以查的话就给你显示之前的了）造成原因：hive底层的运行机制是将元数据保存在mysql中，然而mysql默认编码是不支持中文，支持的是latin1的编码。首先看自己的mysql是安装在那一台服务器上，然后启动服务器和mysql。切换完之后查看一下hive3下的表，看看是否成功切换，执行完回显示很多很多表名如果有就说明成功了。

完成后将archer.txt文件上传到hdfs上。将以下数据存放在archer.txt文件下。打开DataGrip,根据数据编写建表语句。

在连接之前先启动hdfd,year, hive的metastore服务和hiveserver2服务（metastore必须在hiveserver2之前启动）驱动如果自己有就用自己的，没的话就下一个，建议下hive-jdbc-3.1.2-standalone.jar（一般下DataGrip时应该有一个自带的）到此就连接上了，开始你的hive之旅吧。完成之后打开DataGrip。

最近做Maven 项目, 测试的时候出现了下面的问题。修改 pom.xml。

接着创建一个新的文件夹来存放mysql的安装包（一般在/export/software 目录下创建）下载完划到最后会显示下面这段文字（这里我用的是FinalShell,XShell不知道显不显示）然后找到截图所示圈出来的零时密码复制下来，后面更改密码时用(生成的密码不一样，别按我这个找）然后用此命令进行删除（删除后再查看，此时是看不见的。#mysql的启动和关闭 状态查看 （这几个命令必须记住）完成后Ctr+D退出, 到这MySQL就安装成功了。接着启动mysql（这是首次启动）登录MySQL修改密码。

首先在此电脑C盘下找到hosts文件（我的路径如下，一般都是这个路径）：C:\Windows\System32\drivers\etc。编辑完后保存并关闭然后在返回cmd里ping就能成功了（可以用网段也可以用虚拟机名称）在里面编辑自己虚拟机的网段及名称，网段与名称中间空格。原因：没在系统文件hosts中添加网段及虚拟机名称。cmd中ping不到虚拟机三台虚拟机。然后右键选择记事本打开。

首先打开任务管理器然后就能连接上了。