在实际优化工作之中，我们经常会遇到一个页面我们不想其被搜索引擎收录的情况，在这种情况下，使用robots非常便捷，一劳永逸。因为你只要在robots中对该页面设置了屏蔽抓取以后，不管你的这个页面在网站中出现了多少次，都不会被爬虫抓取以及收录；而如果这种情况下使用nofollow标签来进行屏蔽的话，你会发现网站维护起来会异常麻烦，因为网站中的新页面难免会有该链接，，生成新的页面都要加一次nofollow标签，一旦有一次遗漏了，就很有可能会被搜索引擎给收录了。还有一种情况则相反，有一个页面我们希望它正常被收录获得排名，但是因为有的页面中关于此链接的重复链接太多了，会造成不好的影响，这时候就不适合用robots来屏蔽了，而是应该使用nofollow标签对部分重复链接进行屏蔽。