百度robots,即刻搜索遵守百度的robots文件

即刻搜索遵守百度的robots文件百度robots 百度百科的搜索引擎文件是这样写的:禁止搜索引擎收录,除了百度、谷歌、msn、有道、搜狗。其实,允许有道和搜狗的字句去年才加进去。在我印象中,有道和搜狗早就可以搜到百度百科的内容了,说明他们没有遵守搜索引擎的协议。现在,百度百科的搜索引擎文件依然没有允许搜搜,但搜搜可以搜到,说明搜搜也没有遵守那个协议。在人民网的搜索引擎“即刻搜索”上搜索一些词汇,可以看到维基百科的结果,而没有百度百科的结果,更没有像百度一样使用阻止用户接触到维基百科的伎俩,可见“即刻搜索”的守信。
Tags:  robots文件 robots 即刻搜索 百度robots

延伸阅读

最新评论

发表评论