java爬取数据模板

public class paqu {
public static void main(String[] args) throws IOException{
    String url="";
    Document document=Jsoup.parse(new URL(url),30000);
//    标签id
    Element element=document.getElementById("J_goodsList");
    System.out.println(element.html());
//   需要爬取什么标签，我这里是li
    Elements elements=element.getElementsByTag("li");

    for (Element el:elements){
        
//    需要爬取的内容，根据网页标签名字而定
        String img=el.getElementsByTag("p-img").eq(0).attr("src");
        String price=el.getElementsByTag("p-price").eq(0).text();
        String name=el.getElementsByTag("p-name").eq(0).text();

        System.out.println(img);
        System.out.println(price);
        System.out.println(name);
    }
}}

代码如上

<dependency>
    <groupId>org.jsoup</groupId>
    <artifactId>jsoup</artifactId>
    <version>1.10.2</version>
</dependency>

需要的jar包

但是这个爬取只会显示在控制台那里，真正需要下载图片等信息的话，还需要其他方法。