[国内信息] 最新阿里云优惠活动：企业级高性能服务器2折起 [复制链接]
查看:112408 | 回复:3092

gydtep · 发表于 2019-3-19 14:20:28

为何采集爬取数据，只有回答了这个问题，

gydtep · 发表于 2019-3-19 15:03:27

只不过别人找到了目前截止目前信息时代数据最好的变现商业产品而已。

gydtep · 发表于 2019-3-19 15:36:25

话说还有很多公司是希望自己的产品被人爬呢？

gydtep · 发表于 2019-3-19 16:05:41

埋点数据，当前以友盟，

gydtep · 发表于 2019-3-19 18:16:16

谈到爬虫具体的实现框架，我首推python语言家族的scrapy

gydtep · 发表于 2019-3-19 20:07:58

至于其他工具或者类库，比如requests/xpath等页面请求解析库等更是数不胜数，

gydtep · 发表于 2019-3-19 21:00:15

其中个人觉得spiderman2作为学习java是一个不错的框架，

gydtep · 发表于 2019-3-20 13:49:13

爬虫很多情况下，是多变的，

gydtep · 发表于 2019-3-20 14:30:54

目前该公司拥有三款产品，主要是saas模式，

gydtep · 发表于 2019-3-20 14:55:52

还是造福了不少爬虫工程师啊，只不过scrapinghub作为云上版本，