零基础完成珍爱网项目 Java+MySQL+echarts （ZhenaiSpider+ZhenaiWeb）（三）

本文链接：https://blog.csdn.net/aifeinihao/article/details/81076496

继续我们的项目，上次之后我们基本上完成了数据的获取（即爬虫），接下来呢就是如何去保存这些数据，有两种方式，一种呢是以文本形式保存到本地，第二种是就是保存到数据库，而我们呢选择后者。

Mysql

1，第一当然还是先下载了，进入网站即可选择相应的版本https://dev.mysql.com/downloads/file/?id=476696

2.我们这里是5.7.22,打开网址，翻到最下面，点击如下，直接下载就好

3，解压，进行初始化数据库

在bin目录下，执行以下的命令来初始化数据库（cmd下）：

D:\b\mysql-5.7.21-winx64\bin>mysqld --initialize，

获取初始化以后的用户名root,和密码：

然后你会发现解压的目录下，多了一个叫data的文件夹

打开之后，有一个后缀为err的文件，用notepade++ 打开或者记事本也可以

，

在这个文件的最后，每个人的不一样但localhost：后面的就是你的密码

4，接下来呢，测试启动mysql

在解压目录下的bin目录下输入以下指令mysqld --console

如果显示如图信息，就证明你安装成功了。切记不要关闭这个窗口。

5，登陆

密码就是刚才那个文件夹里的那个，但你会发现在这个密码下什么都做不了

修改密码：输入以下指令即可修改密码，如下1234就是我所修改之后的密码，

mysql> set password=password('1234');

显示以下信息就代表修改成功了

Query OK, 0 rows affected, 1 warning (0.00 sec)

修改完成之后，我们再执行 show tables jiu'就会发现可以执行了

显示的这些信息都是你所包含的表

6，方便起见，我们将mysql 安装成windows服务，在bin目录下，执行如下指令即可完成安装

接下来呢我们配置环境变量，这样我们就可以在cmd中启动mysql了

在path 下添加到mysql的bin，如下图

然后打开cmd 输入 net start mysql 即可启动mysql(要注意在执行之前我们要关掉之前测试启动mysql的那个窗口)

当然了停止mysql 的命令是 net stop mysql

7，再登陆

-u用户名 -p

对于本机来说：

你可以设置远程登陆，即在别人的机器上也可以登录你的数据库，具体设置方法如下

1.先查看一下你的用户列表

你会发现在root 那栏只有localhost 即代表只有本机才可以登陆，接下来呢将localhosthuan换成% 这样就可以实现远程登陆了

到这里呢我们的mysql 基本上就设置好了

接下来呢我们去xia项目中添加mysql的依赖

<groupId>mysql</groupId>

<artifactId>mysql-connector-java</artifactId>

</dependency>

关于mysql的语句，我们在这里简单地说几个

1.创建数据库，后面的 character set utf8 是设置数据库的编码方式为utf8 （一般都会是utf8 ）

2，进入这个数据库

3，创建一个表

3，查看数据库下的表

这时会发现我们刚才创建的表就出现了

4，向表中写数据

基本操作就这些其他操作，如删除表，删除字段等等可自行百度查阅

接下来呢，我们用java语句去操作数据库，即jdbc，关于jdbc 给大家一个lian链接感觉写的挺不错，这里就不赘述了

https://www.cnblogs.com/wuyuegb2312/p/3872607.html

这里我们使用DButils操作数据库。使用 c3p0做连接池，之所以使用连接池是因为每次操作数据库，都重新创建一个连接。Connection 使用连接池：保证连接的重用，回收连接。

接下来呢，我么要做的就是要添加，c3p0的依赖，

https://mvnrepository.com/ 然后搜索c3p0 找到相应的依赖，然后拷贝到我们的pom.xml 文件夹下即可自动下载依赖

<groupId>com.mchange</groupId>

</dependency>

然后添加c3p0的配置文件 c3p0p-config.xml

<?xml version="1.0" encoding="UTF-8"?>

<c3p0-config>

<default-config>

<propertyname="jdbcUrl">jdbc:mysql:///hyxy?characterEncoding=UTF8&useUnicode=true&useSSL=false</property>

<property name="driverClass">com.mysql.jdbc.Driver</property>

</default-config>

</c3p0-config>

创建一个连接池，通过读取上面的配置文件

package cn.hyxy.zhenai.util;
import javax.sql.DataSource;
import com.mchange.v2.c3p0.ComboPooledDataSource;
public class DSUtils {
   //1:声明dataSour e
   private static DataSource DATASOURCE;
   //2:开发一个静态的代码块，只执行一次
   static {
       DATASOURCE = new ComboPooledDataSource();
   }
   //3:获取Da
   public static DataSource getDataSource() {
       return DATASOURCE;
   }
}

使用dbutils

导入dbutils的依赖

<groupId>commons-dbutils</groupId>

<artifactId>commons-dbutils</artifactId>

</dependency>
然后呢我们就要根据我们所获取数据的结构，制做mysql的表

我们来设计我们的表格

输入指令，来创建这个表格

CREATE TABLE dogs(

id BIGINT,

NAME VARCHAR(50),

age INT,

workaddr VARCHAR(20),

height INT,

salary VARCHAR(30),

homeaddr VARCHAR(30),

married VARCHAR(10),

grade VARCHAR(10),

worker VARCHAR(20),

house VARCHAR(10),

car VARCHAR(10),

sex VARCHAR(10)

);

然后我们利用程序将爬取的数据写入到数据库，为了更可观的查看我们爬取的数据，我们可以利用数据库管理和开发工具

例如navicat premium

将数据写入到数据库中，在spider 中写一个方法，传入我们所获取的信息，利用这个方法将我们传进的信息，写入到数据库中

public void insert(String sql, String id, String name,String sex, String age, String workaddr, String height, String salary,
           String homeaddr, String married, String grade, String worker, String house, String car) throws Exception {
       QueryRunner run = new QueryRunner(DSUtils.getDataSource());
       run.update(sql, id, name,sex, age, workaddr, height, salary, homeaddr, married, grade, worker, house, car);
   }

这样呢我们就成功将我们获取的信息写入到我们的数据库了然后将spider 跑起来其获取信息