• 2013-03
    21
    [ Other ] [ 3 ]
    这几天访问量突增,流量/IO一下上去了,于是检查Nginx日志,发现有好多都是spider爬行记录。谷歌spider与百度spider居多,剩余的什么有道、微软bing、Yahoo等七八个都在爬。百度spider是笨的出名的,不用说,而雅虎spider貌似比其他spider更顽固。[...]
  • 1