遭遇腾讯SOSO爬虫攻击

晚间老婆公司一台服务器非常慢，页面几乎打不开，CPU占用率也非常高，还以为收到攻击呢，晚间正是Google、baidu搜索网站的时间，网站如此慢肯定不行的，通过网关的防火墙查看到如此深夜来自于58.61.164.142、58.61.164.140、58.61.164.138这三个IP访问量奇高无比而且频率非常快，Google一下发现是SOSO的爬虫，以前见识过baidu的爬虫扒网站速度奇快导致流量很高、网站无反应，谁知道腾讯这个烂公司的无良程序员也写出这种攻击式的爬虫程序（它速度快了，其它爬虫就慢了，例如baidu、google）。

设置一个条件封锁所有来自58.61.164.*的流量，顿时服务器恢复正常。对应iptable语句为：
iptables -A FORWARD -j DROP -p tcp -s 58.61.164.1/24

apache的.htaccess文件设置如下也可：
order allow,deny
deny from 58.61.164.
allow from all

如果只需要封锁soso爬虫的5个ip，可以用58.61.164.136/29。

最奇怪的是soso上面写着搜索结果有Google提供，怎么自己也弄个爬虫呢，太变态了。有没有一个网站列出所有这些无良爬虫的IP哦。

不知道做一个这样的网站会不会被干掉。

遭遇腾讯SOSO爬虫攻击相关推荐

腾讯soso,请停止你们的流氓蜘蛛爬虫
根据soso官网的声明:http://help.soso.com/webspider.shtml 里面说得很清楚, 5.我可以拒绝sosospider访问我的站点么? sosospider遵循robo ...
企业平均每年遭遇9起有针对性攻击
本文讲的是 : 企业平均每年遭遇9起有针对性攻击 , [IT168 编译]高级持续性攻击( APT )可能比想象的更普遍:最新研究发现,在过去12个月中,企业平均遭遇9起这种有针对性的攻击.根据P ...
新闻平台聚合之腾讯新闻爬虫发布
idea of startproject 对于 web 开发者而言,目前各大新闻门户网站,新浪新闻,百度新闻,腾讯新闻,澎湃新闻,头条新闻并没有提供稳定可用的 feed api. 对于 nlper,缺 ...
腾讯soso退出历史舞台，搜索结果全部由搜狗提供
腾讯soso退出历史舞台,搜索结果全部由搜狗提供前段时间腾讯4.48亿美元战略投资搜狗搜搜注入搜狗,现在soso的搜索结果已经全部由搜狗提供了,上图哈:
腾讯SOSO问问今日登场
"不能给对手留下无竞争的发展空间","人不犯我我不犯人",这个是腾讯CEO马化腾的守护策略 ,所以SOSO问问终于在互联网上登场了. "知识型搜索&q ...
串起珍珠的链条——记腾讯SOSO团队
记者 / 高松 "各位网友,大家好!欢迎来到腾讯SOSO的团队博客.SOSO大家庭的所有成员,都在为提供更好的搜索产品.搜索技术而努力.希望你能够在搜搜上找到所有想获取的信息.而我们的每一个 ...
前天在腾讯soso问问上别人问我raid问题？
前天在腾讯soso问问上别人问我raid问题? 情况是这样的,因为那位网友是微星P43 Neo3-F(LV版)的主板,刚开始确定了是否有集成raid,但是发现有,但是到官方网站看到一句话,要按地区来看 ...
如何通过腾讯SOSO问问获得巨大IP流量？
如何通过腾讯SOSO问问获得巨大IP流量? 我以前有一个网站,我不知道怎么才能够获的最大的流量,而且来的速度也快,经过朋友的介绍与解答我才知道了怎么才能够获取更大的IP流量了,现在我的网站几乎每天有2 ...
腾讯SOSO发工资了，每天签到领金币兑实物奖品
[b]1.什么是SOSO发薪计划?[/b]搜搜发薪计划是腾讯SOSO全新推出的[i]用户激励返利平台[/i].为感谢广大用户的支持,搜搜准备了大量的实物和虚拟礼物,在使用SOSO产品的同时就能获得丰富 ...

遭遇腾讯SOSO爬虫攻击

遭遇腾讯SOSO爬虫攻击相关推荐

最新文章

热门文章