V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
zqjilove
V2EX  ?  站长

如何屏蔽网站被恶意搜索请求?

  •  
  •   zqjilove · 2018-05-19 10:53:25 +08:00 · 3433 次点击
    这是一个创建于 2182 天前的主题,其中的信息可能已经有所发展或是发生改变。

    腾讯云最新优惠活动来了:云产品限时1折,云服务器低至88元/年 ,点击这里立即抢购:9i0i.cn/qcloud,更有2860元代金券免费领取,付款直接抵现金用,点击这里立即领取:9i0i.cn/qcloudquan

    (福利推荐:你还在原价购买阿里云服务器?现在阿里云0.8折限时抢购活动来啦!4核8G企业云服务器仅2998元/3年,立即抢购>>>:9i0i.cn/aliyun

    刚刚建了一个工具站(本身也是抓取三方数据),但是就有人直接构造 URL,用代理不断访问搜索页面,导致站点不断啊抓取第三方数据,直接被限制了。有什么办法可以比较方便的解决这种恶意搜索请求呢?

    img

    5 条回复  ?  2018-05-20 16:10:00 +08:00
    serical
        1
    serical  
       2018-05-19 11:07:14 +08:00 via Android
    你抓了先缓存起来,解决了被限制的问题,再来斗智斗勇?
    m939594960
        2
    m939594960  
       2018-05-19 12:33:33 +08:00
    限制同 IP 的搜索频率
    golmic
        3
    golmic  
       2018-05-19 12:52:37 +08:00 via Android
    人家能用代理你也用
    m939594960
        4
    m939594960  
       2018-05-19 12:56:00 +08:00
    限制同 IP 的搜索频率,或者注册后才能搜索,或者到达某个数量后开启验证码
    jssyxzy
        5
    jssyxzy  
       2018-05-20 16:10:00 +08:00
    百度下"范爬虫"
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1129 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 18:56 · PVG 02:56 · LAX 11:56 · JFK 14:56
    Developed with CodeLauncher
    ? Do have faith in what you're doing.


    http://www.vxiaotou.com