关于robots.txt的相关问题-优读网-重庆seo

我在robots.txt中设置了禁止百度收录我网站的内容，为何还出现在百度搜索结果中？

如果其他网站链接了您robots.txt文件中设置的禁止收录的网页，那么这些网页仍然可能会出现在百度的搜索结果中，但您的网页上的内容不会被抓取、建入索引和显示，百度搜索结果中展示的仅是其他网站对您相关网页的描述。

禁止搜索引擎跟踪网页的链接，而只对网页建索引

如果您不想搜索引擎追踪此网页上的链接，且不传递链接的权重，请将此元标记置入网页的<HEAD> 部分：<meta name="robots" content="nofollow">

如果您不想百度追踪某一条特定链接，百度还支持更精确的控制，请将此标记直接写在某条链接上：<a href="signin.php" rel="nofollow">sign in</a>

要允许其他搜索引擎跟踪，但仅防止百度跟踪您网页的链接，请将此元标记置入网页的<HEAD> 部分：<meta name="Baiduspider" content="nofollow">

禁止搜索引擎在搜索结果中显示网页快照，而只对网页建索引

要防止所有搜索引擎显示您网站的快照，请将此元标记置入网页的<HEAD>部分：<meta name="robots" content="noarchive">

要允许其他搜索引擎显示快照，但仅防止百度显示，请使用以下标记：<meta name="Baiduspider" content="noarchive">

注：此标记只是禁止百度显示该网页的快照，百度会继续为网页建索引，并在搜索结果中显示网页摘要。

robots.txt文件对大小写有严格要求吗？

robots.txt对大小写严格区分的，因此，在建设网站过程中，都应该使用小写来命名文件夹和URL，这样避免造成困扰。

分享到：

优读网-重庆seo