全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

IP归属甄别会员请立即修改密码
查看: 739|回复: 8
打印 上一主题 下一主题

CF如何拒绝python-requests的爬虫

[复制链接]
跳转到指定楼层
1#
发表于 2019-6-29 12:08:12 来自手机 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
一直在爬白白耗费我的流量,cf如何设置才能屏蔽掉它?
推荐
发表于 2019-6-29 12:11:31 来自手机 | 只看该作者
不会伪装ua的requests不是好爬虫
3#
 楼主| 发表于 2019-6-29 12:10:13 来自手机 | 只看该作者
本帖最后由 svd1983 于 2019-6-29 12:11 编辑

162.158.58.121 - - [29/Jun/2019:12:10:52 +0800] "GET /wwroot HTTP/1.1" 302 5 "-" "python-requests/2.22.0"
5#
发表于 2019-6-29 12:11:43 | 只看该作者
cf免费防火墙加自定义规则
你在自己服务器加规则也可以
6#
 楼主| 发表于 2019-6-29 12:12:17 来自手机 | 只看该作者
hlsk 发表于 2019-6-29 12:11
cf免费防火墙加自定义规则

具体的规则怎么设置呢
7#
发表于 2019-6-29 12:13:18 | 只看该作者
svd1983 发表于 2019-6-29 12:12
具体的规则怎么设置呢

设置ua包含python-requests就block
9#
发表于 2019-6-29 12:18:35 | 只看该作者
5秒盾或者限制访问次数
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-12-18 04:36 , Processed in 0.059481 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表