服务器访问任何套了 cloudflare 的站点都显示 403 Forbidden，怎么办？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 2229 天前的主题，其中的信息可能已经有所发展或是发生改变。

这两天服务器端尝试写了个爬虫练练手，结果今上午突然抓取任何套了 CF 的站点都给我返回 403 Forbidden，加了各种各样的 header 都 403 错误，没套 CF 的站点就抓取正常，这是怎么回事？

第 1 条附言 · 2018-10-18 14:45:05 +08:00

我在服务器上抓取我架设在这台机器上的网站都 403 了。。。(╯‵□′)╯︵┻━┻

Forbidden

站点

爬虫练

Cloudflare

13 条回复 • 2018-10-18 22:38:13 +08:00

PHPer233

2018-10-18 12:16:25 +08:00 via iPhone

cloudflare 有防御策略，你的 IP 地址已经被封了。

stabc

2018-10-18 12:21:22 +08:00

mytsing520

2018-10-18 12:21:32 +08:00

Your IP address was blocked by CloudFlare.

alwayshere

2018-10-18 12:23:32 +08:00

@PHPer233
@mytsing520 即使我的服务器 ip 被 A 网站列为黑名单，cloudflare 也不至于禁止我访问其他 BCDEFG 网站吧？？？

mytsing520

2018-10-18 12:25:38 +08:00

@alwayshere 对于爬虫或扫描器，CF 有权全局屏蔽

alwayshere

2018-10-18 12:28:15 +08:00

@mytsing520 以前我写爬虫，上百个进程爬几百万个页面，也没触发 CF 的防御机制。。。

mytsing520

2018-10-18 12:32:47 +08:00

@alwayshere 这不是一成不变的措施

alwayshere

2018-10-18 12:36:45 +08:00 via iPhone

@mytsing520 那有解封时间么？

qyxx

2018-10-18 13:01:42 +08:00 via Android

被封了，说明选择 cf 作为 cdn 的确不错 2333

mytsing520

2018-10-18 13:45:00 +08:00

@alwayshere 你只能发信询问 CF 了，有些 IP 是永久封

zhkrb

2018-10-18 14:58:07 +08:00

正好顺便问一句，有没有人碰到过绕过 cf 那个检测页面后，cookies 仍然只有__cfduid，没有 cf_clearance 的情况

realpg

2018-10-18 16:24:09 +08:00

大快人心系列

SukkaW

2018-10-18 22:38:13 +08:00

恭喜你的 IP 进入 Cloudflare 信誉低 IP 列表，换个新的 IP 吧。