Noindex и rel=canonnical не экономят краулинговый бюджет сайта | Новости рынка SEO: 05 Декабря 2016

Noindex и rel=canonnical не экономят краулинговый бюджет сайта.

Джон Мюллер (Google) рассказал, что метатег noindex влияет на индексирование, а не на сканирование страницы. Гуглбот в любом случае будет сканировать страницу, чтобы найти метатеги, и так или иначе израсходует долю краулингового бюджета.

Аналогичная ситуация с атрибутом rel=canonnical. Google в любом случае пройдется по всем страницам, чтобы посмотреть, что они действительно дублируются.

Источник: seroundtable.com

...