谷姐:我们都是谷歌迷
We are all Google fans

这个华为蜘蛛 每天大量的来爬我网站 简直就是cc我一样-hins

Mozilla/5.0 (Linux; Android 7.0;) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; PetalBot;+https://webmaster.petalsearch.com/site/petalbot)
这个华为蜘蛛 每天大量的来爬我网站 简直就是cc我一样,搞的cpu一直100%,太无耻了啊。你们有没有这种情况

热议
推荐楼 论坛大师
这是我网站用的,你把 PetalBot 添加上

3楼 上帝也疯狂 昨天08:28

哈哈。太正常了。我也是。天天有人挂的cf的IP,来扫我网站,就想着我网站备份在根目录然后下载下来哈哈。。痴心妄想。

4楼 hins 昨天08:31

阻止垃圾爬虫

这是我网站用的,你把 PetalBot 添加上

baidu的也屏蔽?

5楼 论坛大师 昨天08:32

baidu的也屏蔽?

我的英文站,面向国外用户的

6楼 junhan 昨天08:36

我早就禁止了,不说我还以为是国外垃圾蜘蛛这种

7楼 hanzv 昨天08:38

把华为蜘蛛给禁止爬取

8楼 phpsky 昨天08:40

我更狠,直接白名单,除了百度 Google蜘蛛其他全403

9楼 专业黑人抬棺 昨天08:51

不开防火墙的下场, 你开个cc规则,大规模爬的,蜘蛛也拉黑不就行了

10楼 zaeve 昨天08:53

你不说我还以为是国外蜘蛛呢,早屏蔽了。。。今天才知道是华为的。。。

12楼 hins 昨天21:16

把华为蜘蛛给禁止爬取

目前已屏蔽这个辣鸡蜘蛛

13楼 lllll 昨天23:00

早都爆出来了非法爬取 robots禁止了还爬

14楼 外星人 2小时前

反思一下你的小鷄爲何如此垃圾

15楼 hins 1小时前

反思一下你的小鷄爲何如此垃圾

不是小鸡啊 独服

16楼 云缨 1小时前

不爬我,肯定是看不起我

17楼 外星人 半小时前

不是小鸡啊 独服

反思一下你的杜甫爲何如此垃圾

18楼 shunglay 2分钟前

给华为发个律师函玩玩

申明:本文内容由网友收集分享,仅供学习参考使用。如文中内容侵犯到您的利益,请在文章下方留言,本站会第一时间进行处理。

未经谷姐允许不得转载:谷姐靓号网 » 这个华为蜘蛛 每天大量的来爬我网站 简直就是cc我一样-hins
分享到: 生成海报

评论 抢沙发

评论前必须登录!

立即登录   注册

买Google Voice认准【谷姐靓号网】

Google Voice靓号列表Google Voice自助购买
切换注册

登录

忘记密码 ?

切换登录

注册

我们将发送一封验证邮件至你的邮箱, 请正确填写以完成账号注册和激活