爬取数据，但是写入数据库时，提示Exception in thread "main" java.lang.NullPointerException，同时发现很多问题。

最新推荐文章于 2024-07-18 08:00:00 发布

weixin_41847089

最新推荐文章于 2024-07-18 08:00:00 发布

阅读量3.1k

点赞数

分类专栏： School Sprider 文章标签： Sprider School

本文链接：https://blog.csdn.net/weixin_41847089/article/details/81940269

版权

在尝试使用Java爬虫并将数据存入数据库的过程中，遇到了空指针异常的问题。主要原因是未实例化`ProductDao`类。在`ProductDao`中，通过扩展`JdbcTemplate`并设置数据源解决了这一问题。但初始代码中缺少构造函数来初始化`JdbcTemplate`，导致异常。修正后，`ProductDao`通过`super.setDataSource(dataSource)`设置了数据源，并提供了`addProduct`方法用于数据操作。

摘要由CSDN通过智能技术生成

主函数

package com.company.spriderjd;

import com.company.dao.ProductDao;
import com.company.domain.Product;
import com.google.gson.Gson;
import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpGet;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import java.io.IOException;
import java.util.List;
import java.util.Map;

/**
* @Author: Ori
* @Date: 2018/8/21
* @Description: version-01
*/
public class JDSprider01 {

private static  ProductDao productDao =new ProductDao();
public static void main(String[] args) throws Exception {
    /*//1.确定url
    String urlStr="https://search.jd.com/Search?keyword=%E6%89%8B%E6%9C%BA&enc=utf-8" +
                     "&suggest=1.def.0.V01&wq=sh&pvid=4e17067564564bc398d0ffdaba5be084";
    //2.获取httpClient对象
    CloseableHttpClient httpClient = HttpClients.createDefault();
    //3.指定请求方式
    HttpGet httpGet = new HttpGet(urlStr);
    //4.执行请求，获取响应对象
    CloseableHttpResponse response = httpClient.execute(httpGet);
    //5.获取HTML页面（获取数据）
    String html = EntityUtils.toString(response.getEntity(), "utf-8&