使用Play WS库编写的搜狐新闻的爬虫程序

搜狐新闻是目前国内新闻平台中数一数二的,我们平时想要看什么样的新闻,找起来是不是比较麻烦呢?今天就给大家带来一个使用Play WS库编写的搜狐新闻的爬虫程序,想要看什么类型的新闻,只要通过它就可以轻松实现,一起来学习一下吧。
```scala
import play.api.libs.ws._
import scala.concurrent.ExecutionContext.Implicits.global

object Crawler {
  def main(args: Array[String]): Unit = {
    val ws = WS.url("https://news.sohu.com/")
    val response = ws.get().map { response =>
      response.header("Content-Type") match {
        case "image/*" => {
          val content = response.body
          //保存图片数据到本地文件
          val file = new java.io.File("output.jpg")
          java.io.BufferedOutputStream(new java.io.FileOutputStream(file)).write(content.array())
          println(s"Image saved to ${file.getAbsolutePath}")
        }
        case _ => println("Not an image")
      }
    }
    response.onComplete
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值