百独托管7500 紫田网络超高转化播放器收cps[推荐]速盾CDN 免实名免备防屏蔽阿里云 爆款特卖9.9元封顶提升alexa、IP流量7Q5团队
【腾讯云】中小企福利专场【腾讯云】多款产品1折起高防 随时退换 好耶数据小飞国外网赚带你月入万元炎黄网络4H4G10M 99每月
香港带宽CN2/美国站群优惠中客数据中心 服务器租用联盟系统移动广告平台 中易企业专场腾讯云服务器2.5折九九数据 工信部正规资质
腾讯云新用户大礼包代金券高价收cpa注册量高价展示【腾讯云】2核2G/9.93起租服务器找45互联 随时退换阿里云 短信服务 验证秒达

[其它内容] WS实现搜狐新闻分类搜索 [复制链接]
查看:144 | 回复:0

1477

主题

1656

帖子

9

积分

落伍者(一心一意)

Rank: 1

贡献
685
鲜花
0
注册时间
2016-6-22

落伍者落伍微信绑定落伍手机绑定

发表于 2023-11-10 15:14:14 | 显示全部楼层 |阅读模式 来自 中国江苏淮安
华科云商丑图.jpg
​​搜狐新闻是目前国内新闻平台中数一数二的,我们平时想要看什么样的新闻,找起来是不是比较麻烦呢?今天就给大家带来一个使用Play WS库编写的搜狐新闻的爬虫程序,想要看什么类型的新闻,只要通过它就可以轻松实现,一起来学习一下吧。

```scala

import play.api.libs.ws._

import scala.concurrent.ExecutionContext.Implicits.global

object Crawler {

def main(args: Array[String]): Unit = {

val ws = WS.url("https://news.sohu.com/")

val response = ws.get().map { response =>

response.header("Content-Type") match {

case "image/*" => {

val content = response.body

//保存图片数据到本地文件

val file = new.io.File("output.jpg")

.io.BufferedOutputStream(new.io.FileOutputStream(file)).write(content.array())

println(s"Image saved to ${file.getAbsolutePath}")

}

case _ => println("Not an image")

}

}

response.onComplete(_ => println("Request completed"))

}

}

```

请注意,这个程序需要在支持Scala和Play WS的环境中运行。此外,您需要确保您的系统上安装了正确的代理服务器软件,并且代理服务器设置正确,以便能够访问搜狐新闻。如果代理服务器设置不正确,程序可能无法正常运行。此外,您还需要确保程序具有足够的权限,以便能够保存文件到本地文件系统。如果程序没有足够的权限,它可能无法保存文件。​​​​
企业专线拨号VPS动态IP派克斯ADSL本地拨号,联系QQ174629754
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

论坛客服/商务合作/投诉举报:2171544 (QQ)
落伍者创建于2001/03/14,本站内容均为会员发表,并不代表落伍立场!
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论!
落伍官方微信:2030286 邮箱:(djfsys@gmail.com|tech@im286.com)
© 2001-2014

浙公网安备 33060302000191号

浙ICP备11034705号 BBS专项电子公告通信管[2010]226号

  落伍法律顾问: ITlaw-庄毅雄

手机版|找回帐号|不能发帖?|Archiver|落伍者

GMT+8, 2024-11-26 21:46 , Processed in 0.053514 second(s), 35 queries , Gzip On.

返回顶部