Jump to content


Photo
- - - - -

/itemlist/tag/


Best Answer Sliapy , 12 January 2015 - 13:46

Если робот нашел такие ссылки, значит, скорее всего, где-то на страницах сайта они есть.

 

Сканируйте сайт соответствующими сервисами/программами (чтобы понять, на каких страницах и откуда они формируются) и, например, закрывайте такие урл через robots.txt либо уже ищите причину их появления.

Go to the full post


  • This topic is locked This topic is locked
3 replies to this topic

#1 ВикторУ

ВикторУ
  • JBZoo User (rus)
  • User rate: 0
  • posts: 10
  • topics: 3

Posted 12 January 2015 - 13:35

Приветсвую, в ВМ вылезла куча битых url  в которых присутсвует /itemlist/tag/, при том что на сайте нет ни единого тега. Как бороться с этим злом?


  • 0

#2 Sliapy

Sliapy
  • JBZoo User (rus)
  • User rate: 50.6
  • posts: 6393
  • topics: 15

Posted 12 January 2015 - 13:46   Best Answer

Если робот нашел такие ссылки, значит, скорее всего, где-то на страницах сайта они есть.

 

Сканируйте сайт соответствующими сервисами/программами (чтобы понять, на каких страницах и откуда они формируются) и, например, закрывайте такие урл через robots.txt либо уже ищите причину их появления.


Edited by Sliapy, 12 January 2015 - 13:47.

  • 0
[color=#aa0000]Не забывайте нажимать кнопку "Вопрос Решён" под сообщением, которое решило Вашу проблему.[/color]

#3 ВикторУ

ВикторУ
  • Topic Starter
  • JBZoo User (rus)
  • User rate: 0
  • posts: 10
  • topics: 3

Posted 12 January 2015 - 13:50

Благодарю


  • 0

#4 Sliapy

Sliapy
  • JBZoo User (rus)
  • User rate: 50.6
  • posts: 6393
  • topics: 15

Posted 12 January 2015 - 13:51

Если конкретно, то подойдут программы Netpeak Spider (бесплатная), либо Screaming Frog Seo Spider (платная).


  • 0
[color=#aa0000]Не забывайте нажимать кнопку "Вопрос Решён" под сообщением, которое решило Вашу проблему.[/color]




Click to return to top of page in style!