Файл robots.txt — это служебный файл, который подсказывает поисковому роботу, какие разделы сайта индексировать, а какие нет. Определяет основное зеркало сайта, указывает путь к карте сайта sitemap.xml и вообще, наличие этого файла — признак любого […]
Появилась необходимость проверить лог-файлы на предмет посещения страниц роботами Яндекса и тут я понял что совсем не знаю как отличить один робот от другого. В общем нашел довольно полезную информацию. Итак у яндекса есть основные […]
Ситуация такая: Был сайт, назовем его «domen.ru» и все было хорошо, индексировался нормально, в выдаче был на хороших местах, но робот яндекса индексировал его с WWW. Я добавил в robots.txt диррективу «Host: …» с нужным […]
Ситуация такая. В ближайшем будущем я собираюсь переводить данный блог с домена xxxxxx.com на новый домен — yyyyyy.com. С последнего сейчас стоит 301-й редирект на домен xxxxxx.com. Благодаря этому самому 301-му редиректу показатели yyyyyy.com склеились […]
Простой и быстрый метод для того, чтобы RSS-лента сайта на feedburner’e не попадала в индекс поисковиков. Чтобы поисковик не счел вашу ленту дубликатом ваших материалов, а пользователь, кликнувший на ленту — не напоролся на неформатированную […]
Maksis.ru © 2024 | При использовании материалов сайта активная ссылка на Maksis.ru обязательна.