Биржа маркетинга Каталог услуг Проверка на антиплагиат SEO-анализ текста Адвего Лингвист Проверка орфографии
Адвего
Форум
Все форумы
Разное
Маркетинг, продвижение, реклама, SEO, веб-разработка

Маркетинг, продвижение, реклама, SEO, веб-разработка — Форум Адвего

боковая панель
Разное / Маркетинг, продвижение, реклама, SEO, веб-разработка
DELETED
Подскажите, плиз, как закрыть страницы-дубли в файле robots.txt

На сайте стали появляться дубли страниц, выглядят вот так: [ссылки видны только авторизованным пользователям] Архив дня, так сказать) Закрыла в роботс таким образом: Disallow: /2015/
А нифига оно не закрывает, все равно гугл видит эти страницы как дубли. Плохо разбираюсь в роботс, обычно просто копирую у кого-нить или нахожу в интернете примерное содержание.. Помогите советом, как мне правильно закрыть эти архивы, чтобы полностью вся папка 2015 и ее содержимое не индексировалось.
А если кто доходчиво расскажет, как именно, какими символами закрывать такие дубли - буду премного благодарна. В интернете много информации, но вся такая разная, не знаешь чему верить..

Тема закрыта
Написала: DELETED , 19.03.2015 в 18:07
Комментариев: 20
Комментарии

Показано 8 комментариев
DELETED
За  0  /  Против  0
DELETED  написал  19.03.2015 в 19:40
Сайт можете показать?

                
DELETED
За  0  /  Против  0
DELETED  написала  19.03.2015 в 19:42  в ответ на #6

                
DELETED
За  1  /  Против  0
DELETED  написал  19.03.2015 в 20:12  в ответ на #7
[ссылки видны только авторизованным пользователям]
[ссылки видны только авторизованным пользователям]

Тоже надо закрыть:
Disallow: */?pg=
Disallow: /tag/

И не правильная структура (как всегда в любом шаблоне wp)
[ссылки видны только авторизованным пользователям] - есть страница
[ссылки видны только авторизованным пользователям] - нет страницы

Лучше вам плагин поставить NoCategory Base - он уберет этот лишний кусок урла и будет у вас [ссылки видны только авторизованным пользователям]

А вместо Алл Ин Сео Пак поставьте Platinum SEO, настройки импортируются и в нем есть галочка делать 301 редиректы. Т.е. все пройдет без болезненно для сайта.
А /2015/ я не нашел, просто если это архив по годам, то должен быть и 2014 и скоро появится 2016....

                
DELETED
За  0  /  Против  0
DELETED  написала  19.03.2015 в 20:20  в ответ на #9
Спасибо за подсказки, все исправлю и поставлю плагины. А страница архивов есть, и действительно, проверила, есть и 2014 год(. Открываются архивы у меня по ссылке [ссылки видны только авторизованным пользователям] Так, как я его закрыла, Disallow: /2015/ эти архивы 2015 года должны выпасть из индекса? Огромное спасибо за помощь!

                
DELETED
За  1  /  Против  0
DELETED  написал  19.03.2015 в 20:53  в ответ на #10
Раз закрыли, то выпадут со временем. Но нужно на всякий случай и 2014 и 2016 закрыть

                
Евгений (advego)
За  0  /  Против  0
Евгений (advego)  написал  19.03.2015 в 21:34  в ответ на #9
"И не правильная структура (как всегда в любом шаблоне wp)
[ссылки видны только авторизованным пользователям] - есть страница
[ссылки видны только авторизованным пользователям] - нет страницы"

Ничего страшного в такой структуре нет, по второй ссылке никто никогда не заходит, потому что ее не существует на страницах.

Ставить еще один плагин, только для того, чтобы убрать никому не мешающую проставку в урле - не самая полезная фича.

Platinum SEO ничем не отличается от All in One SEO, кроме как наличием опции 301 редиректов ну и еще возможностью оптимизации рубрик, наверное, но странно, зачем вы советуете править robots.txt после установки Platinum SEO, если в нем так же присутствует опция "noindex for Data based Archives" и "Use noindex for Tag Archives" - они уже будут закрыты, в robots дублировать нет смысла.

                
Larisa-s
За  0  /  Против  0
Larisa-s  написала  19.03.2015 в 23:36  в ответ на #12
Евгений, а если со второй ссылки редирект поставить?

                
Евгений (advego)
За  1  /  Против  0
Евгений (advego)  написал  20.03.2015 в 00:39  в ответ на #14
Не нужно с нее ничего ставить, ее как таковой не существует в явном виде, как не существуует страниц [ссылки видны только авторизованным пользователям] или [ссылки видны только авторизованным пользователям] - так можно написать что угодно руками, но на сайте они нигде не генерируются, а раз их нет, то и редиректить их не нужно никуда. Просто кому-то не нравится, что в URL страницы присутствует слово category, но по факту это не имеет ровно никакого значения. Если же в проиндексированном сайте убрать category в урле, то да, редиректы будут нужны - решается еще одним вышеназванным плагином, но придется ждать переиндексации. И все ради чего, спрашивается?

Я порекомендовал SEO-плагин, потому что он решает сразу обе задачи - закрывает от индексации нужные типы страниц и позволяет оптимизировать остальные. Ставить же плагин, для того, чтобы в урле там что-то убрать, считаю бессмысленным - это ничего не даст для сайта. Когда нужно сделать ЧПУ или кириллицу в латиницу перевести - да, лучше поставить плагин, который за секунду все сделает красивым.

                
Отправка жалобы...
Спасибо, ваша жалоба принята
Вы уже жаловались
Публикация комментариев и создание новых тем на форуме Адвего для текущего аккаунта ограничено.
Подробная информация и связь с администрацией: https://advego.com/v2/support/ban/forum/1186
Жаловаться можно только на чужой комментарий
Избранное
Добавить в избранное
Имя
URL
https://advego.com/blog/read/seo/2177242/?op=10528382