给大家来个采集360文库的爬虫程序

今天给大家带来的是一个采集360文库的爬虫程序，非常简洁小巧，适合新手使用，在实际使用时还需要根据自身的需求进行修改，先让我们来一起学习一下吧。

​
```kotlin
import java.net.URL
import java.net.HttpURLConnection
import java.net.InetSocketAddress
import java.net.Proxy

fun main() {
    val proxyHost = "https://www.duoip.cn/get_proxy"
    val proxyPort = 8000
    val proxy = Proxy(Proxy.Type.HTTP, InetSocketAddress(proxyHost, proxyPort))
    val url = URL("http://www.360doc.com")
    val connection = HttpURLConnection(url.openConnection(proxy))
    connection.connect()
    val content = connection.readText()
    println(content)qq：1815405036
}
```

​

首先，我们需要导入必要的库，包括Kotlin的网络库和代理库。接下来，我们需要创建一个URL对象，这是我们打算爬取的网页的URL。然后，我们需要创建一个请求对象，使用我们的代理对象和URL对象。然后，我们需要发送请求并获取响应。最后，我们需要解析响应，提取我们想要的信息。