GOOGLE: МЕТА-ТЕГ NOINDEX НАБАГАТО ЕФЕКТИВНІШЕ КОМАНДИ DISALLOW
В ході чергового вебінару Google для власників сайтів обговорювали, як краще за все закрити контент від індексації пошуковою системою. Зокрема, один з веб-майстрів поцікавився у Джона Мюллера, буде достатньо для цієї мети використовувати команду disallow у файлі robots.txt?
Відповідь офіційного представника Google виявився досить широким:
«Необхідно розуміти одну просту річ. Блокування сторінок robots.txt не дає повної гарантії. Може трапитися так, що на заблоковані таким чином сторінки з інших сайтів хтось буде посилатися. В цьому випадку для нас факт зовнішньої посилання пріоритетний. Отже, цілком можливий варіант, коли ми, перейшовши за посиланням, проиндексируем сторінку, яку ви нібито закрили у файлі robots.txt. І якщо ця сторінка, скажімо, порожня (неякісна), то це не піде на користь сайту.
Враховуючи сказане, я б рекомендував використовувати мета-тег noindex замість команди disallow. Перейшовши по зовнішньому посиланню і виявивши зазначений тег, Google не стане індексувати її вміст. Сторінка буде назавжди вилучено з пошукового індексу. Поки noindex не буде скасовано».
В ході чергового вебінару Google для власників сайтів обговорювали, як краще за все закрити контент від індексації пошуковою системою. Зокрема, один з веб-майстрів поцікавився у Джона Мюллера, буде достатньо для цієї мети використовувати команду disallow у файлі robots.txt?
Відповідь офіційного представника Google виявився досить широким:
«Необхідно розуміти одну просту річ. Блокування сторінок robots.txt не дає повної гарантії. Може трапитися так, що на заблоковані таким чином сторінки з інших сайтів хтось буде посилатися. В цьому випадку для нас факт зовнішньої посилання пріоритетний. Отже, цілком можливий варіант, коли ми, перейшовши за посиланням, проиндексируем сторінку, яку ви нібито закрили у файлі robots.txt. І якщо ця сторінка, скажімо, порожня (неякісна), то це не піде на користь сайту.
Враховуючи сказане, я б рекомендував використовувати мета-тег noindex замість команди disallow. Перейшовши по зовнішньому посиланню і виявивши зазначений тег, Google не стане індексувати її вміст. Сторінка буде назавжди вилучено з пошукового індексу. Поки noindex не буде скасовано».