论坛>计算机科学>软件综合
发表于《数据抓取艺术——以KC网为例》
amo
2年9个月前IP:广西
929238
6楼

预防恶性爬虫，原理上不难。

粗暴型：限制单独一个ID/IP在特定时间内发起请求次数。例如登录ID限制2秒1次，匿名游客限制15秒1次


+0.5
科创币
全桥整流
2024/04/16
快速粗暴解决问题
评论
文号 / 929238
amo
实习会员
名片发私信
学术分 -1
总主题 9 帖总回复 982 楼拥有证书：进士 机友 笔友
注册于 2010/11/27 10:53:31最后登录 2026/10/29 21:51:43
主体类型：个人
所属领域：无
认证方式：手机号
IP归属地：0

个人简介

暂未填写
笔记
{{note.content}}
{{n.user.username}}
{{fromNow(n.toc)}} {{n.status === noteStatus.disabled ? "已屏蔽" : ""}} {{n.status === noteStatus.unknown ? "正在审核" : ""}} {{n.status === noteStatus.deleted ? '已删除' : ''}}
  • 编辑
  • 删除
  • {{n.status === 'disabled' ? "解除屏蔽" : "屏蔽" }}
我也是有底线的