- 博客(20)
- 收藏
- 关注
RSS订阅原创 hive安装
如果出现错误，请查看/etc/my.cnf文件中指定的错误log日志的文件:log- error=/var/log/mysqld.log。注意：卸载后/var/lib/mysql中的数据及/etc/my.cnf不会删除，如果确定没用后就手工删除。4.访问active的namenode，查看文件列表。5.表在hdfs也有对应的目录，但是目录下没有数据。7.在hadoop1中连接上mysql查看表中的数据。修改hive-site.xml。
2023-03-12 21:25:11
419
原创 MySQL基础
数据库约束是对表中的数据进行进一步的限制，保证数据的正确 性、有效性和完整性。主键约束(Primary Key) PK 主键约束是使用最频繁的约束。在设计数据表时，一般情况 下，都会要求表中设置一个主键。主键是表的一个特殊字段，该字段能唯一标识该表中的每条 信息。例如，学生信息表中的学号是唯一的。外键约束(Foreign Key) FK外键约束经常和主键约束一起使用，用来确保数据的一致 性。唯一性约束(Unique)唯一约束与主键约束有一个相似的地方，就是它们都能够确 保列的唯一性。
2023-03-10 20:15:30
414
原创 MySQL-linux安装
如果出现错误，请查看/etc/my.cnf文件中指定的错误log日志的文件:log- error=/var/log/mysqld.log。A temporary password is generated for root@localhost，后面就是随机密码。注意：卸载后/var/lib/mysql中的数据及/etc/my.cnf不会删除，如果确定没用后就手工删除。HlR"使用随机密码登录系统。3、检查并删除老版本mysql的开发头文件和库。
2023-03-09 14:00:21
199
原创 pyecharts解决不能显示图像
pyecharts解决不能显示图像jupyter最近学习pyecharts时在jupyter当中不能出现图像，总结了一下解决方法。pyecharts-assets 提供了 pyecharts 的静态资源文件。可通过 localhost-server 或者 notebook-server 启动本地服务。首先将项目下载到本地# 通过 git clone$ git clone https://github.com/pyecharts/pyecharts-assets.git# 或者直接下载压缩包$
2022-05-16 18:47:31
9342
原创 MongoDB分片集群搭建
MongoDB分片集群搭建一、设计集群的架构。节点主机端口副本集配置集节点 ConfigServerlocalhost27019xxconfig路由服务器 Routerlocalhost27017n/a分片0节点0localhost27010xx0分片0节点1localhost27011xx0分片0节点2localhost27012xx0分片1节点0localhost27013xx1分片1节点1localh
2022-05-11 23:30:27
2129
原创 Linux（二）克隆和快照
Linux_克隆和快照一·、拍摄快照。在虚拟机安装好以后。打开VMware。提示：在拍摄快照之前先关闭虚拟机。如上，要给虚拟机拍摄快照，点击1快速拍快照，在2处输入快照名称，在3处描述中添加虚拟机快照描述信息，点击4拍摄快照。点击5可以查看、删除、拍摄快照。点击上图的5，查看具体的快照信息进行快照管理：1处显示刚才拍摄的快照，2处是当前的状态，3处可以拍摄快照，4处可以在各个快照之间切换，5处可以删除快照。二、虚拟机克隆。搭建的虚拟机可以作为一个模板，同时也是所有链接克隆虚拟机的基础，没
2022-05-11 23:19:36
1538
原创 利用pyspark练习sparkRDD算子的操作练习实验
实验名称RDD算子的操作实验实验目的掌握RDD算子的基本用法实验资源student.txt实验环境VMware WorkstationUbuntu 16.04Jupyter NotebookPyspark实验内容student.txt中的数据一共分为6列，每一列含义如下表所示：班级号姓名年龄性别课程分数练习题目：(1) 读入studnet.txt文档，生成RDD(2) 获得年龄大于20的学生(3) 获得性别为男的学生(4
2022-05-02 14:07:23
2399
原创 Scala（一）
Scala第一章节1. Scala简介1.1 概述 Scala它是一门基于JVM的多范式编程语言, 通俗的说: Scala是一种运行在JVM上的函数式的面向对象语言. 之所以这样命名, 是因为它的设计目标是: 随着用户的需求一起成长. Scala可被广泛应用于各种编程任务, 从编写小型的脚本到构建巨型系统, 它都能胜任. 正因如此, Scala得以提供一些出众的特性, 例如: 它集成了面向对象编程和面向函数式编程的各种特性, 以及更高层的并发模型. 总而言之, Scala融汇了许多前所未有的
2022-04-25 19:03:10
642
原创 Linux入门
linux复习总结(一)1 安装Centos操作系统1.1、下载镜像网易镜像：<http://mirrors.163.com/centos/7.9.2009/isos/x86_64/>搜狐镜像：<http://mirrors.sohu.com/centos/7.9.2009/isos/x86_64/>1.2、新建虚拟机打开VMware，创建新的虚拟机。打开创建向导，选择自定义，点击“下一步”选择稍后安装操作系统点击下一步，选择“Linux”，在版本中选择
2022-04-20 18:44:20
944
原创 Matplotlib的使用
Matplotlib的使用Matplotlib 是一个 Python 的 2D绘图库。通过 Matplotlib，开发者可以仅需要几行代码，便可以生成绘图，直方图，功率谱，条形图，错误图，散点图等。Matplotlib的安装pip install matplotlibMatplotlib的基本使用import numpy as np from matplotlib import pyplot as plt x = np.arange(1,11) y = 2 * x + 5 p
2021-05-13 22:08:11
164
原创 Spark+Kafka构建实时分析
*Spark+Kafka构建实时分析**Dashboard 项目**一：实验环境准备**预备知识*Linux系统命令使用、了解如何安装Python库、安装kafka。*训练技能*熟悉Linux基本操作、Pycharm的安装、Spark安装，Kafka安装，PyCharm安装。*任务清单*\1. Spark安装（略）\2. Kafka安装\3. Python安装（略）\4. Python依赖库\5. PyCharm安装（略）一、系统和软件的安装一、项目环境搭建。（一）、spark
2021-05-10 22:54:16
828
原创 Spark_RDD作业
pyspark使用RDD的转换和行动命令进行数据分析1.pyspark交互式编程练习查看文件“data01.txt”数据集，该数据集包含了某大学计算机系的成绩，请根据给定的实验数据，在pyspark中通过编程来计算以下内容：（1） 该系总共有多少学生；>>> lines = sc.textFile("file:///usr/local/spark/sparksqldata/data01.txt")>>> res = lines.map(lambda x:x.sp
2021-04-28 15:50:52
4298
1
原创 MySQL的基本操作
MySQL数据库的基本操作创建数据库一：创建数据库；启动 MySQL 服务后， 使用 MySQL 自带的客户端软件输入正确密码或者使用第三方数据库管理软件 Navicat 均可连接到数据库服务器端，但是想要使用数据库来存储数据， 就必须先要创建一个数据库（相当于为想要存储的数据开辟一块存储空间） 。 下面我们将介绍两种方法创建数据库： 使用 SQL 语句创建数据库和使用图形界面创建数据库。SQL语句创建数据库不管是在 MySQL 自带的客户端软件“ MySQL 5.7 Command Line C
2021-02-20 11:42:15
637
1
原创 python文件操作（一）
python——文件操作放寒假了，在家没事就复习一下之前学的python，就当做记笔记吧，也加深一下印象，分享出来也希望可以帮助大家。今天我看了文件方面的内容，就分享一下我复习到的知识点吧！首先是相关的模块操作，我就写下来吧：上面是会在文件操作当中用到的一些模块，下面我们就进行相关文件的一系列操作吧！一：文件打开、关闭；python——文件操作open()函数用于创建文件对象，基本语法格式如下：open(文件名[,打开方式])如果只是文件名，代表在当前目录下的文件。文件名可以录入全路径，比
2021-01-21 17:14:22
302
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人