这样设置robots.txt，可以吗？

diqian · 发表于 2010-1-14 12:43:47

我的主域名是 www.2001.com，我又在根目录建了一个文件夹abc，并在abc中做了一个新站www.2002.com。

我不想让别人通过www.2001.com/abc/index.html 查看到 www.2002.com网站上的内容。

我用这样的设置，会不会屏蔽搜索引擎收录www.2002.com的网页呢？

User-agent: *
Disallow: /abc/

add.c · 发表于 2010-1-14 12:44:49

这个到站长交流版块咨询

tnnd · 发表于 2010-1-14 12:53:00

www.2002.com的内容不会被屏蔽掉。

一路同行 · 发表于 2010-1-14 13:01:01

不要这样做，可以做个301转向到www.2002.com
并且，别人也不知道你的目录结构不会www.2001.com/abc/index.html这样访问的，这个不公开，搜索引擎也找不到，也不会影响SEO

diqian · 发表于 2010-1-14 14:37:22

怎么做301转换呢。能详细点吗？

这样设置robots.txt，可以吗？

回复 1# 的帖子

回复 4# 的帖子