2020 Java大众点评网爬虫

最新推荐文章于 2024-08-05 16:50:32 发布

超级大蚂蚁

最新推荐文章于 2024-08-05 16:50:32 发布

阅读量727

点赞数 1

分类专栏：笔记

本文链接：https://blog.csdn.net/jintaocccq/article/details/108151236

版权

本文介绍了如何使用Java编写一款爬虫程序，详细解析了抓取大众点评网上商家信息的步骤，包括网络请求、HTML解析、数据存储等关键技术，助你了解网络爬虫在实际项目中的应用。

摘要由CSDN通过智能技术生成

package josupa;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import java.io.IOException;
import java.util.ArrayList;
import java.util.HashMap;
import java.util.List;
import java.util.Map;

/**
 * Created with IntelliJ IDEA.
 *
 * @Auther: ljt
 * @Version 1.0
 * @Date: 2020/08/21/14:50
 * @Description:
 */
public class JsoupTest {

    public static int countPage = 50;
    public static int start = 1;
    public static List<Map> list = new ArrayList<>();

    public static void main(String[] args) throws IOException {
        String url = "http://www.dianping.com/shanghai/ch10/g101p";

        run(url , start,countPage);
        for(Map m: list){
            System.out.println(m.toString());
        }
    }


    public static void run(String url,int start,int countPage)throws IOException{
        Document document = Jso