Тег ‘robots.txt’

Видеокурсы по WordPress

Михаил Шакин начал серию видеокурсов по WordPress, начал с рассказа о правильном файле robots.txt. Этот файл важен для любого сайта, так как с помощью его можно закрыть от индексации ненужные поисковикам страницы, то что мы просто хотим скрыть, чтобы не индексировалось. Это обычно бывают страницы административной части, фиды, печати, логина, регистрации, скрытых разделов. личных данных [...]