新搜索引擎soso不遵守robots协议?
发布:admin | 发布时间: 2009年9月11日| 这几天的大新闻蛮多,先是李开复老师下海,接着soso推自己的搜索引擎,很好 不过在搜索我一个新网站广州SEO的时候,竟然发现soso已经收录了,然而由于是个新站内容还不全面我的robots.txt 是这么写的 User-agent:* 会不会因为soso刚推出自己的搜索引擎为了展示自己的技术迅速的把新站收录? (快照还是9月3号,网站刚搭起来两天,域名虽然是01年的但是没有外链,能这么快确实技术也不错) 或者soso压根就不遵守robot协议,管你是允许还是禁止先爬回来再说。 不过不可否认soso凭借庞大的用户群 相信表现也不会太差,至少在这两天几个网站的数据中看到, 基本上流量都排在百度的后面居第二,不错! | |
发布:admin | 分类:国内机票 | 评论:0 | 引用:0 | 浏览:
| TrackBack引用地址
- 相关文章:





