有人遇到过 Nginx 日志刷屏的问题吗

AsIsZum UID:15503 新手上路

新手上路

LV1 13小时前

技术

164

给学校的社团网站配了 Nginx 日志切割，结果 access.log 每秒钟刷好几条，全是爬虫的 UA，什么 python-requests 之类的。用 fail2ban 封了一堆 IP 还是没完。有没有大佬用别的方法过滤这些垃圾请求？

这家伙太懒了，什么也没留下。

0 0

本页参与者

探索者阿杰

最新回复

创意Canvas UID:12706 Lv1

爬虫多的站都这样，我这边用 fail2ban 封了一堆还是刷

12小时前

1楼
探索者阿杰 UID:5721 Lv1

我这边也有这情况，python-requests 的 UA 直接写个 deny 规则挡掉就安静多了

10小时前

2楼
FaWoodPart UID:11649 Lv1

我这边也是，日志轮转设了跟没设一样，直接扔了ua匹配规则眼不见心不烦

9小时前

3楼
TinkerTrail UID:5484 Lv1

我这边用logrotate配了个按天切，然后配合grep过滤掉python-requests的UA，日志立马清爽了

9小时前

4楼

请先登录后再回复

登录后即可发布评论、参与讨论、和作者互动

AsIsZum uid:15503

新手上路

LV1 9 金币

社区版块

综合主机 AI 技术域名更多版块反馈

社区广告

智谱AI开放平台老品牌菠萝云暑期热销

找漏洞赢现金高质量代理ip