Сообщений в теме: 13

[demfi]

Недавно заметил следующее:

Фильтр работает нормально

http://demfi.ru/amo?... 2108-2109-2115

В коде есть это:

<meta name="robots" content="noindex, nofollow" />

 

Но Яндекс как-то умудрился и узнал, что можно показывать сайт так: http://demfi.ru/amo

Закрыть этот путь никак не могу, ни через htaccess ни через джумлу.

 

Подскажите?

 

Прикрепленные изображения

• 

[Sliapy]

Не понял сути вопроса. 

 

Почему Яндекс не должен был индексировать страницу http://demfi.ru/amo ?

 

Если вам нужно закрыть какой-то пункт меню от индексации, то в нем есть возможность задать точно такой же мета-тег robots

 

[demfi]

В меню конечно всё указано как надо, поэтому тут:

http://demfi.ru/amo?... 2108-2109-2115

вижу это: <meta name="robots" content="noindex, nofollow" /> - отлично!

 

А вот тут:

http://demfi.ru/amo

http://demfi.ru/amo/

http://demfi.ru/amo/ford-focus-2

....

ничего про robots нету.

 

В htaccess чего только не писал ничего не помогает :-(

 

RewriteCond %{REQUEST_URI} ^amo(.*)$

RewriteRule (.*) - [R=404,L]

 

Не помогло.

[Sliapy]

В категориях тоже есть возможность задать мета-тег robots

 

 

Ну и всегда есть возможность закрыть ненужные станицы в robots.txt вашего сайта.

[demfi]

За категории спасибо.

В robots.txt закрыл, но пишут, что это не всегда работает.

 

Для SEO такое поведение крайне плохо, кучи дублей страниц по разным путям :-(

Причём сам и не подозреваешь об этом.

 

Хотел в htacces закрыть - не получается

Мета-тег Robots настроил, но этот тег вообще отсутствует в http://demfi.ru/amo,...amo/lada-granta...

 

Засада прям.

[Sliapy]

Не совсем понимаю, как могут являться дублями (и дублями чего?) созданные вами категории.

 

Если они вам не нужны, то зачем вы создали их на сайте?

 

Закрыть в robots.txt все, связанное с amo можно через

 

Disallow: /amo/*

Сообщение отредактировал Sliapy: 26 February 2016 - 10:29

[demfi]

Пример дублей (страниц, а не категорий)

http://demfi.ru/amo/...z-premium-demfi

http://demfi.ru/prod...z-premium-demfi

 

amo - это алиас меню (служебного), на который ссылается модуль JBZoo Search List. Мне этот пункт не нужен, но нужен для корректной работы модуля.

При работе модуля результаты его действий показываются на странице: http://demfi.ru/amo?...ilter&app_id...

Яндекс как-то вычислил, что можно еще по таким путям пройти:http://demfi.ru/amo,...amo/lada-largusи т.д. и получить дубли страниц, т.к. они (страницы) доступны по нужному мне (и видимому всем) меню.

 

Задача:

Запретить доступ роботам (а в принципе вообще всем) к:

http://demfi.ru/amo

http://demfi.ru/amo/всефайлы и подкаталоги

[Sliapy]

В коде товаров (http://demfi.ru/amo/...z-premium-demfi и http://demfi.ru/prod/premium/stojka-perednyaya-kalina-kross-gaz-premium-demfi) есть тег rel="canonical".

 

Все остальное можете закрыть в robots.txt.

[demfi]

Возможно я как-то неверно организовал меню, я ХЗ.

[Sliapy]

А почему вы не привяжете поиск к одному из уже существующих пунктов меню?