您当前的位置:首页 > 互联网 > 文章详情

网站还是继续被semrush.com和mj12bot.com恶意爬虫

2019-10-077325人围观
简介前段时间写过一篇文章 semrush.com和mj12bot.com恶意爬虫经常爬网站怎么办?是因为我的一个站搬到CDN上去之后,一直被各种恶意爬虫在爬,导致流量飙升,后来我通过技术手段获取到了每天访问网站100此以上的IP,并在CDN里的IP黑名单把这些恶意IP给封禁了.现在就碰到了两个尴尬的问题

前段时间写过一篇文章 semrush.com和mj12bot.com恶意爬虫经常爬网站怎么办?

是因为我的一个站搬到CDN上去之后,一直被各种恶意爬虫在爬,导致流量飙升,后来我通过技术手段获取到了每天访问网站100此以上的IP,并在CDN里的IP黑名单把这些恶意IP给封禁了.

现在就碰到了两个尴尬的问题:
1.对方的IP超级多,而腾讯CDN的IP黑名单只有100个,导致100个满了之后,其他的就无从下手了,还是会消耗我的CDN流量的.

2.及时把这些恶意IP给拉入了黑名单,但是还是能访问,只不过会提示403,但居然还会损耗流量?之后就奇葩了啊!


我到底该如何彻底的杜绝这些恶意IP损耗我的流量呢?

文章评论

热门评论
暂无评论