Wxxx744的博客

原创 Oracle前置知识 1

Oracle前置知识

原创 Linux文件管理

Linux文件管理

原创 Linux简介

Linux基础

原创 Linux_简介

原创 Hadoop4——HA集群的搭建（高可用）

Hadoop——高可用（HA）配置文件的截图是最初的，有一些小错误，想要配置文件可以评论。可以先浏览操作步骤。一.配置须知：集群主节点二.安装配置zookeeper前提：jdk和hadoop环境已经搭建好1. 下载安装rz 下载安装zookeepertar解压到 /export/server中vi etc/profile2. 配置文件配置zoo.cfg保存退出创建以下文件夹分发文件到其它两个节点然后修改各自.

原创 HBase——集群搭建

HBase——集群搭建基础：三台虚拟机（node-01,node-02,node-03）已经完成HA(高可用集群)的搭建。每台虚拟机文件目录如下 /export/server 安装目录 /export/software 存放软件包 /export/data 存放一些数据文件...

原创 flask框架

Flask是目前十分流行的web框架，采用Python编程语言来实现相关功能。它被称为微框架，微框架中的“微”是指Flask旨在保持代码简洁且易于扩展，Flask框架的主要特征是核心构成比较简单，但具有很强的扩展性和兼容性，程序员可以使用Python语言快速实现一个网站或Web服务。一般情况下，它不会指定数据库和模板引擎等对象，用户可以根据需要自己选择各种数据库。这里我将数据都存储在MySQL中，所以使用flask框架时需要对MySQL数据库进行连接，读取数据后，将数据传入echarts中，进行we

原创 虚拟机本来有MySQL，后安装宝塔的MySQL导致MySQL不能启动报错

本人的虚拟机原来使用yum安装了MySQL，但由于安装了宝塔，又在宝塔面板安装了MySQL5.7，导致在SSH中输入如下代码后出现报错，不能登陆。mysql -uroot -pRoot123!尝试很多方法，最后发现最管用的是在宝塔面板卸载MySQL，再重装。此时使用mysql命令可以直接在SSH中进入MySQL服务，然后修改密码。在进行了此操作后，之后的每次启动虚拟机MySQL需要手动开启，才能连接MySQL远程工具service mysqld status #查看MySQL服务是否开启s

原创 sqoop从hdfs上导出数据到MySQL报错：ClassNotFoundException:allclo

这里写自定义目录标题1.Exception:找不到 class allclo百度了很久才找到解决办法即在sqoop的安装目录下执行这句话./bin/sqoop export --connect jdbc:mysql://localhost:3306/clothing --username root --password Root123! --table allclo --m 1 --export-dir /clo_res.txt --input-fields-terminated-by " "

原创 Hadoop1——创建虚拟机

创建虚拟机（附解决yum不可用的问题）1. 创建虚拟机(基于centos7)2. 添加centos7映像文件3. 初始配置先开启虚拟机点击进去无需操作，完成退出即可操作完成后等待即可4. 网络配置显示网卡名称为ens33按 i 进行编辑按 esc, :wq 保存退出...

原创 模型评估——ROC曲线与AUC计算（真正率假正率）

评估方法：在学习得到的模型投放使用之前，通常需要对其进行性能 评估。为此， 需使用一个“测试集”（testing set）来测试 模型对新样本的泛化能力，然后以测试集上的“测试误差 ”（testing error）作为泛化误差的近似。我们假设测试集是从样本真实分布中独立采样获得，所以 测试集要和训练集中的样本尽量互斥。给定一个已知的数据集，将数据集拆分成训练集S和测试集 T，通常的做法包括留出法、交叉验证法、自助法。评估指标：要评估模型的好坏光有评估方法还不行，还得确定评估指标。所谓评估指标就是

原创 Hadoop3——集群搭建以及初体验

@[TOC] 1. 匹配主机名@[TOC]2. 下载安装hadoop@[TOC]3. 配置Hadoop环境

原创 python实例3.0——动态页面：Ajax数据爬取

页面内容的生成方式动态页面区别于静态页面的最主要特征是页面内容的生成方式，动态页面的内容 生成方式可以分成两类，即服务端生成、客户端生成。服务器端生成 Web内容管理系统，页面主要内容和页面的结构和表现方式分离。 Client/server/Database 脚本语言：jsp、asp、php等。客户端生成 轻量级、局部的，例如给用户提示警告信息、显示定时时间等。 脚本语言： javascript、VBScript、ActionScript等 插件：Active X插件、Flas

原创 python安装Selenium，配置ChromeDriver

Selenium是一个自动化监测工具，支持多种浏览器，包括Chrome、Safari、Firefox等。Selenium支持浏览器驱动，可以对浏览器进行控制。Selenium是一个自动化测试工具，利用它可以驱动浏览器执行特定的动作，如点击、下拉等操作，同时还可以获取浏览器当前呈现的页面的源代码，做到可见即可爬。1. 前提：安装了Python2. pip安装Seleniumpip install selenium安装成功之后可以使用以下命令查找以下之后进入python，输入impo.

原创 Hadoop2——SSH免密登录功能配置

SSH免密登录功能配置我有三台虚拟机，其中一台主机，两台克隆机xxx.xxx.xxx.130 hadoop01xxx.xxx.xxx.128 hadoop02xxx.xxx.xxx.129 hadoop03其中，免密登录需要两两相登录，即三台虚拟机需要设置免密登录6次hadoop01 免密登录hadooop02ssh-keygen -t rsall -acd .sshll修改此配置文件(主机名与ip映射)因为 ssh hadoop02 时提示错误信息，ssh ip则

原创 csv文件转换为txt格式

打开csv文件乱码，将其类型转换为txt直接打开csv文件会出现如下乱码1.新建excel点击此单元格依次点击 “数据” ->“自文本”最后为处理结果之后可以按照自己的需求对表格内的数据进行操作。保存为txt格式只需要 “另存为”->“txt”格式...

原创 python实战1.1——根据1.0做词云图

python实战1.1——根据1.0做词云图最基础的词云图制作import jiebaimport wordcloudimport matplotlib.pyplot as pltm=open('D:\\pyhomework\\0516\\05_python编程设计_史晓娜418105000617_期末作业_03.txt',mode='r',encoding='UTF-8')t=m.read()ls=jieba.lcut(t) #对文件进行分词处理m.close() #关闭文件txt

原创 python实战1.0——爬取知乎某问题下的回复

python（1）确定问题爬取进行简单筛选def get_number(): url = 'https://www.zhihu.com/question/397995405' kv = {'User-Agent': 'Mozilla/5.0'} # 模拟登录 r = requests.get(url, headers=kv) # 获取网页 # print(r.status_code) 访问成功返回200 # print(r.text) #检查一下

原创 python处理数据集并制作词云图

python处理数据集并制作词云图处理数据使用自定义词典去掉停用词绘制词云图+美化

原创 window10本地解析域名

在centos7中，apache已安装（阿里云备案时间太久，先尝试一下本地解析）域名（举例 www.chunlei.com）解析，通过域名访问网站1.先在命令行中ping一下，看是否可以ping通2.修改hosts文件切记以管理员身份运行然后文件->打开记得路径为 C:\windows\systems32\drivers\etc （需要手动输入一下后面的路径）打开时会发现为空白，记得更改右下角为 所有文件在最后加入内容，保险起见，注意空格（最好将上面的格式复制粘贴再

原创 阿里云服务器——centos7下安装MySQL,并且实现远程连接

centos7下安装MySQL，并且实现远程连接1.先查看MySQL是否安装rpm -qa|grep mysql2.更新yum源wget https://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm3.rpm安装wget到的包4.yum安装MySQLyum install mysql-server5.检查是否已经安装rmp -qa|grep mysql6.查看服务状态systemctl status

原创 阿里云服务器——centos7下源码安装tomcat9

阿里云服务器——centos7下源码安装tomcat9首先进入src文件夹： cd /usr/local/src使用wget命令下载tomcat ：wget https://mirrors.bfsu.edu.cn/apache/tomcat/tomcat-9/v9.0.36/bin/apache-tomcat-9.0.36.tar.gz使用tar命令解压：tar -xzvf apache-tomcat-9.0.36.tar.gz使用 ll 命令在src文件夹中查看文件cd 命令进入to