robts文件中屏蔽的为什么还可以收录？

今天在搜外问答看到了这样一个问题，回答的很多，但是很多人都说错了一个概念。

我今天来给大家详细讲解下，先了解几个概念

1、robots只是禁止抓取，不是禁止收录

2、另外还有nofollow的作用不是不抓取这个链接，是不从这个链接传递权重

了解这2个概念后，我们再来讨论怎么处理这类收录问题：

robots写正确的同时，不要在任何一家收录的网站发外链，友链，也不要主动提交百度，这样才可以保证不被搜索引擎收录，为什么呢？

大家百度查一下淘宝，如图：

按照道理淘宝写了robots怎么还是收录，因为有大量的链接指向淘宝官网，而且这些外链可能权重都比较高，

全部都禁止了，依然收录了1亿多条链接

看到这里，是不是有感而发，我们怎么从百度导流到你的淘宝店！

发布时间：2020-07-10

推荐阅读：

1. Google搜索推出“文章理解技术”，让用户搜索结果更精准
2. 今日头条兴趣认证，领域创作者考核标准是什么？
3. 保持更新文章内容，但网站排名权重却上不去，什么原因？
4. SEM推广中，投放广告的受众分析如何操作？
5. SEO优化操作：做SEO的操作流程经典版，看了就懂SEO