每日导读[请百度不要再抓DoNews的Wiki] 2006/05/13
Filed Under 每日导读 By 旅行者
Posted on 本文最后更新于2006-05-14 12:14:46
From links http://www.mjjq.com/blog/archives/1084.html
声明:请百度不要再抓DoNews的Wiki [ GO ]
wiki.donews.com连续几天,定时被百度的抓取机器人抓到系统停止响应。拜托百度,不要这样抓内容了。就算抓,也应该用1个线程来抓,只抓更新的内容,何必每天抓一次,而且用无数个线程,而且每次都要抓全部内容,还不放过任何wiki的历史页面,甚至连错误信息都要原样搬走。这种抓取方法,谁受得了
wiki.donews.com连续几天,定时被百度的抓取机器人抓到系统停止响应。拜托百度,不要这样抓内容了。就算抓,也应该用1个线程来抓,只抓更新的内容,何必每天抓一次,而且用无数个线程,而且每次都要抓全部内容,还不放过任何wiki的历史页面,甚至连错误信息都要原样搬走。这种抓取方法,谁受得了
MT: 经常发现服务器流量超大,以前也觉得可能是搜索引擎的爬虫在作怪,这次看来还真的有这种情况,像DONEWS的独立服务器都承受不住横行霸道的爬虫,像其他一些虚拟空间的网站更加受不了。。。。。。
遇到这样问题这么办?挡爬虫,不可能吧~还是希望每个搜索引擎更智能一点,不要什么都抓。
齐齐哈尔第二制药公司所有药品被令停止销售 [ GO ]
国家食品药品监督管理局日前发出紧急通知,在全国范围内停止销售和使用齐齐哈尔第二制药有限公司生产的所有药品,同时要求各地药监部门在本辖区范围内就地查封、扣押。
经初步调查,齐齐哈尔第二制药有限公司生产的“亮菌甲素注射液”为假药,其生产环节存在明显漏洞。为保证人民用药安全,国家食品药品监督管理局决定停止销售和使用该厂生产的所有药品。
MT: 无语~医院~医生~药厂
固定链接 | 归类:每日导读 | 发布于:2006-05-13 03:31:11
下一页:每日导读 [追踪关键词!Google Trends] 2006/05/14