|
nofollow的概念最初是由 上网搜索 公司在2005年提出的。当时这个标签的解释主要是为了应对日益普遍的外链群作弊，也就是说只要你加入这个， nofollo w标签 链接，爬虫不会爬行。 此外，由于绝大多数群发外部链接出现在博客或论坛上，当有人留言或发帖时，网民发布的链接可以通过平台自己的程序标记为nofollw，这样这些平台上的群发外部链接不会增加搜索引擎本身相应的抓取工作量，因为搜索引擎发现它添加了 nofol 低的 标签 ，就不会进行爬行了。 我们来分析一下原理。你的新站有1000页，里面包含了很多客服帮助，注册，登录，用户协议等。这些内容所在的页面对搜索引擎来说价值不大。同时，即使搜索引擎抓取了这些页面，也不会对你网站的SEO有什么帮助。 我们假设有300页对搜索引擎毫无价值，但我们知道的是，在一个新的站点，搜索引擎不可能在短时间内包含所有的页面。搜索引擎的原理是先找到你的网站，然后根据你页面的链接进行“停留”和抓取，抓取量假设为每天100个(因为我们知道搜索引擎在新站抓取的页面数量并不理想)。建议你可以看看之前写的搜索引擎。 然后搜索引擎用10天的时间抓取你的1000页。在这个过程中，有一些过滤器，比如一些重复或类似的内容，还有一些像登录和注册这样毫无价值的页面。最后，这些已爬网页面可能会再次从数据库中删除。 现在，问题很明显。如果合理利用nofollw标签，添加一些对提升网站SEO没有太大价值的页面链接，搜索引擎自然会节省大量无效抓取时间，提高你网站的有效抓取。这在实践中非常有用，特别是对于新站和一些大型站。 B 2 C 或者一些 海 数量 数据 信息网站，合理使用 国家骨质疏松基金会 跟随 标签 ，提高搜索引擎的友好度，可以提高你的有效抓取，对提高你的SEO流量也很有帮助。 (责任编辑：admin) |
，不会爬行。