[技术交流] bytespider是个什么东西，一天访问30多万次 [复制链接]
查看:4657 | 回复:14

scybltt · 发表于 2019-7-2 06:39:52

bytespider是个什么东西，一天访问30多万次

带宽CPU，全被他搞跨。

741111 · 发表于 2019-7-2 07:46:38

看名字字节蜘蛛。貌似抖音，头条公司就是字节跳动。把ip段封了，反正不来流量。

ioio · 发表于 2019-7-2 08:17:06

提示: 作者被禁止或删除内容自动屏蔽

热点源码 · 发表于 2019-7-2 09:24:02

是的。这个特别占带宽，直接封IP段吧.

爱情之迷 · 发表于 2019-7-2 10:34:29

#屏蔽非常见蜘蛛
if ($http_user_agent ~* (SemrushBot|Thither.Direct|python|Bytespider|MJ12bot|AhrefsBot|AhrefsBot|hubspot|opensiteexplorer|leiki|webmeup)) {
return 444;
}

爱情之迷 · 发表于 2019-7-2 10:40:32

这个不知道是什么垃圾蜘蛛，我的4核8g内存的服务器都给爬成502错误了，而且cpu都是100%。屏蔽就好了。

tkre · 发表于 2019-7-2 11:09:30

我的站从今日头条搜索来的也不少，今日头条可以站外搜索啊

一只蛐蛐 · 发表于 2019-7-2 11:29:59

应该是蜘蛛

特产 · 发表于 2019-7-2 14:24:54

不清楚

hl530 · 发表于 2019-7-2 14:57:19

头条的

百独托管7500 紫田网络	超高转化播放器收cps[推荐]	速盾CDN 免实名免备防屏蔽	阿里云爆款特卖9.9元封顶	提升alexa、IP流量7Q5团队
【腾讯云】中小企福利专场	【腾讯云】多款产品1折起	高防随时退换好耶数据	小飞国外网赚带你月入万元	炎黄网络4H4G10M 99每月
香港带宽CN2/美国站群优惠	中客数据中心服务器租用	联盟系统移动广告平台中易	企业专场腾讯云服务器2.5折	九九数据工信部正规资质
腾讯云新用户大礼包代金券	高价收cpa注册量高价展示	【腾讯云】2核2G/9.93起	租服务器找45互联随时退换	阿里云短信服务验证秒达

[技术交流] bytespider是个什么东西，一天访问30多万次 [复制链接]
查看:4657 | 回复:14

QQ绑定

落伍手机绑定

落伍者

落伍微信绑定

[技术交流] bytespider是个什么东西，一天访问30多万次 [复制链接] 查看:4657 | 回复:14

QQ绑定

落伍手机绑定

落伍者

落伍微信绑定

[技术交流] bytespider是个什么东西，一天访问30多万次 [复制链接]
查看:4657 | 回复:14