全球主机交流论坛

标题: CF如何拒绝python-requests的爬虫 [打印本页]

作者: svd1983 时间: 2019-6-29 12:08
标题: CF如何拒绝python-requests的爬虫
一直在爬白白耗费我的流量，cf如何设置才能屏蔽掉它？

作者: 黑大王 时间: 2019-6-29 12:09
ua ip

作者: svd1983 时间: 2019-6-29 12:10
本帖最后由 svd1983 于 2019-6-29 12:11 编辑

162.158.58.121 - - [29/Jun/2019:12:10:52 +0800] "GET /wwroot HTTP/1.1" 302 5 "-" "python-requests/2.22.0"

作者: 靓坤 时间: 2019-6-29 12:11
不会伪装ua的requests不是好爬虫

作者: hlsk 时间: 2019-6-29 12:11
cf免费防火墙加自定义规则
你在自己服务器加规则也可以

作者: svd1983 时间: 2019-6-29 12:12

hlsk 发表于 2019-6-29 12:11
cf免费防火墙加自定义规则

具体的规则怎么设置呢

作者: hlsk 时间: 2019-6-29 12:13

svd1983 发表于 2019-6-29 12:12
具体的规则怎么设置呢

设置ua包含python-requests就block

作者: svd1983 时间: 2019-6-29 12:14
ok

作者: lvyebbs 时间: 2019-6-29 12:18
5秒盾或者限制访问次数

欢迎光临全球主机交流论坛 (https://loc.998820.xyz/)