搜狐新闻是目前国内新闻平台中数一数二的,我们平时想要看什么样的新闻,找起来是不是比较麻烦呢?今天就给大家带来一个使用Play WS库编写的搜狐新闻的爬虫程序,想要看什么类型的新闻,只要通过它就可以轻松实现,一起来学习一下吧。
```scala
import play.api.libs.ws._
import scala.concurrent.ExecutionContext.Implicits.global
object Crawler {
def main(args: Array[String]): Unit = {
val ws = WS.url("https://news.sohu.com/")
val response = ws.get().map { response =>
response.header("Content-Type") match {
case "image/*" => {
val content = response.body
//保存图片数据到本地文件
val file = new java.io.File("output.jpg")
java.io.BufferedOutputStream(new java.io.FileOutputStream(file)).write(content.array())
println(s"Image saved to ${file.getAbsolutePath}")
}
case _ => println("Not an image")
}
}
response.onComplete