网络爬虫的云服务,这个东西可行吗?
解决IP不够用或者被封的问题。
1
irainy 2015-01-04 15:53:07 +08:00 1
为何不干脆再进一步 可定制云API 服务
|
2
liangdi 2015-01-04 15:56:47 +08:00 via iPhone
IP通过代理解决?
|
3
sing1ee 2015-01-04 16:05:13 +08:00 via iPhone
可行的,我们之前做得微博爬萌就是类似
|
4
binux 2015-01-04 16:08:43 +08:00 2
|
5
mhycy 2015-01-04 16:09:29 +08:00
那么只要在你那买个套餐就能把你整站IP给封了~
|
6
ipconfiger 2015-01-04 16:12:01 +08:00
爬虫说白了就是一个任务分发系统,用来分发两个任务:取网页,分析抓取特定部分入库。很多PAAS平台已经有了这些功能的基础了,比如SAE或者BAE什么的
|
7
ykjsw 2015-01-04 16:15:38 +08:00
可以爬Google吗:)
|
8
hansnow 2015-01-04 16:35:02 +08:00
八爪鱼就有云服务……按条收费的
|
10
fising OP @ipconfiger 有吗?
|
13
hansnow 2015-01-04 16:39:16 +08:00 1
|
15
invite 2015-01-04 17:32:44 +08:00
你的云IP,不也就那么几个么,知道了还是被封。
|