java 正则提取url_使用正则+URL实现对网页超链接提取并保存到本地

该博客介绍了如何使用Java进行网页抓取,通过HttpURLConnection请求网页,利用正则表达式匹配`href`属性来提取网页中的超链接,并将这些链接保存到本地文件中。示例代码展示了从指定URL开始,提取超链接并存储到文本文件的过程。
摘要由CSDN通过智能技术生成

package web;

import java.io.BufferedReader;

import java.io.FileWriter;

import java.io.IOException;

import java.io.InputStreamReader;

import java.net.HttpURLConnection;

import java.net.MalformedURLException;

import java.net.ProtocolException;

import java.net.URL;

import java.util.ArrayList;

import java.util.regex.Matcher;

import java.util.regex.Pattern;

@SuppressWarnings("all")

public class WebSpiderCopy {

public static void main(String[] args) {

Spider.Data("https://www.bilibili.com/","gbk","D:\\myjava\\爬虫by163.txt");

System.out.println();

}

}

@SuppressWarnings("all")

class Spider{

private String path;

public Spider(String path) {

this.path=path;

}

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值