robots

几天前，惊爆淘宝一纸Robots （Disallow baiduspider ），封掉了百度蜘蛛。淘宝VS百度 ，电子商务的江湖风云再起！ 本来这场风云之争就已经跟好很强大了，没想到，不知是带头大哥的作用，还是**公愤呢，或是该出手时就出手～sohu博客、校内网、海内网、51.com、中搜等众多网站…

索引擎统一Robots文件标准-转载于ZAC 搜索引擎优化SEO每天一贴 搜索引擎三巨头打的不亦乐乎，但偶尔也合作一下。 去年Google，雅虎，微软就合作，共同遵守统一的Sitemaps标准。前两天三巨头又同时宣布，共同遵守的robots.txt文件标准。Google，雅虎，微软各自在自己的官方博…