Tags: Google,SEO,点点网,百度抓取.
答:site一下,你会发现有约345万个收录,但翻到76页,看到的都是点点网用户的子域名(也就是个人主页),但你打开这些用户的robots.txt文件,并没有发现任何有屏蔽百度的迹象。如我的空间文件:http://xiaoo./robots.txt 打开后将会发现,点点为了协助搜索引擎的收录,还专门写了一条语句:Sitemap: http://xiaoo./sitemap.xml(为用户内容自动生成的地图) 我们再到/robots.txt这个文件下看,除了倒数第二行有条【Disallow: /dianlog/】的命令外,没有任何屏蔽迹象。(这里面放得都是用户的账号ID和编辑页面,可能是为了用户的安全而考虑) 而最终用户生成的页面为这样的结构形式【http://xiaoo./post/2012-03-29/17370771】,看到了没,用户的内容都在post这个目录下面放着,也就是说,跟上面那个dianlog目录根本无关。 这也是好多以内容为驱动的门户类不愿意建立二级域名的主要原因,就是怕搜索引擎能力有限,抓不到那么深。最好的例子是Google一下。 由此证明,不是点点不想,而是百度不能。 |
|