腾讯搜搜独立了,网站解除对Sosospider屏蔽
--James Qi 2009年9月7日 (一) 22:09 (CST)
去年有一阵子服务器总是频繁负载过重,查到是一些搜索引擎蜘蛛捣乱,特别是腾讯Sosospider,在网站上爬行的速度可以用疯狂来形容,从网上一些文章看有不少网站都被迫将其屏蔽,我曾经给腾讯Soso发过邮件要求降低蜘蛛到访量,虽然收到回信说降低,但我们实际上没有看到降低,只有把将其很多IP地址都屏蔽掉。
前几天看到李开复从谷歌辞职的消息时还注意到一条新闻就是腾讯与谷歌的合作到期,正式推出了自己的独立搜索引擎,我当时就意识到这对我们网站会有影响,因为我们网站来自Soso的流量还不算少。
今天星期一,查看流量发现上周网站总的流量有明显下降,仔细对比发现主要是来自Soso的流量有大幅减少,这肯定与我们屏蔽了很多Sosospider的IP有关,与去年相比,目前服务器添加了新硬件、采取了文件缓存、试用了主从数据库,负载能力应该大大提高了,所以刚才已经去把以前对搜搜蜘蛛的屏蔽解开了。
不过这又需要一些时日来让搜搜恢复对我们网站的收录以及带来流量。另外,偶然看到搜搜风向标、人向标也许对了解通过腾讯进行搜索的人关注的热点有帮助。
后记:我上周写邮件给Soso要求恢复对我们网站的抓取、收录后,今天刚刚收到的回信
sosospider 发送至 我 显示详细信息 16:55 (6 小时前) 您好: 已经从禁采抓取恢复为正常抓取,请关注问题是否解决。 感谢您对搜搜产品的关注,如有其他问题,请随时联系我们。 ---- SOSO网页搜索Spider专用反馈邮件 Mailto: sosospider@tencent.com
等一段时间,观察看看再说。--James Qi 2009年9月21日 (一) 23:01 (CST)
标签:腾讯、搜搜、搜索、Sosospider、蜘蛛、SEO。 |
相关内容:
|
别名:Tecent的Soso独立运行,我们网站解开对搜搜蜘蛛的屏蔽。
关于“腾讯搜搜独立了,网站解除对Sosospider屏蔽”的留言:
新增留言
--123.15.41.230 (IP 位置 | 谁是 | 贡献) 2009年9月10日 (四) 13:33 (CST)
留言:
每天都看老兄的日志 看过你的日志后 马上给搜搜发了封邮件 商都智库 www.shangdu123.cn
- 回复:谢谢关注啊,我以前曾经写邮件让搜搜停止派爬虫来我们网站,并且屏蔽了一些IP地址,这次解开了IP限制,但还没有再给soso写邮件,IP屏蔽解开后这几天,从google analytics后台来看来自soso的流量已经开始止跌回升。不过我还是准备等一下给soso再写一封邮件,说明情况,欢迎sosospider继续前来爬我们的网站,希望能早日完全恢复甚至表现更好。--James Qi 2009年9月13日 (日) 22:41 (CST)