Автор Тема: Принцип построения robots для webasyst lego  (Прочитано 4113 раз)

Andrei

  • Гость
У меня есть сайт на лего(версию не знаю но вроде б 25)

Общий принцип как я понял:

1.блокируем повторяющиеся страницы, наподобие вот этих:
Disallow: /index.php?productID
Disallow: /index.php?categoryID
Конкретно у меня в лего доступ к категории(продукту) проходит по 3ем ссылкам:
index.php?productID=455
index.php?product_hurl=brevno/ 
product/brevno/

В htaccess есть строки:
RewriteRule catalog/(.*)$ index.php?catalog_hurl=$1
RewriteRule product/(.*)$ index.php?product_hurl=$1
то есть если я поставлю Disallow: /index.php?product_hurl в robots.txt у меня исчезнут страницы из поиска

2.Блокируем некоторые директории
Disallow: /templates_c/

3.Блокируем ненужные ссылки вроде добавления в корзину и клон этой ссылки
Disallow: /add2cart
Disallow: /index.php?shopping_cart
Disallow: /admin.php

Нужно ли(как) блокировать ссылки подобного плана?
index.php?$1_hurl=$2&sort=$3&order=$4
то есть различные сортировки(к примеру по имени от а до я(asc) или от я до а(desc))
И еще у некоторых сайтов на лего видел что в роботс есть блокировка таких ссылок:
Disallow: /*sort
в htaccess у меня
RewriteRule (.*)/(.*)/&sort=(.*)&order=(.*)$ index.php?$1_hurl=$2&sort=$3&order=$4

А как мне заблокировать все страницы такого плана?
http://site.ru/add2cart/brevno/
так Disallow: /*add2cart
либо так Disallow: /add2cart
« Последнее редактирование: Июля 10, 2011, 06:59:14 pm от Andrei »

Оффлайн wmzkarro1

  • Пользователь
  • **
  • Сообщений: 26
    • Просмотр профиля
Re: Принцип построения robots для webasyst lego
« Ответ #1 : Июля 11, 2011, 09:27:31 am »
ага б.25 у вас..Её и в проекте нет.)
В админке внизу посмотрите,что у вас за версия..НО сильно слмневаюсь,что это ЛЕГО вообще!

Andrei

  • Гость
Re: Принцип построения robots для webasyst lego
« Ответ #2 : Июля 13, 2011, 11:08:19 pm »
lego, там нет надписи версии - просто webasyst lego edition;
подправил уже намного лучше индексирует - больше 100 страниц, но при составлении файла sitemap.xml на вспомогательном сайте в нэте(каких много) не может определить дату последнего изменения той или иной страницы.

kil

  • Гость
Re: Принцип построения robots для webasyst lego
« Ответ #3 : Июля 26, 2011, 08:05:40 pm »
скиньте для примера у кого какой получился роботс.тхт больно интересно, да и вообще надобы сделать основной и на форуме оставить в топике, а потом уже от основного делать какие то отклонения, кто готов выложить?

Оффлайн Al_Uk

  • Спец
  • ***
  • Сообщений: 247
    • Просмотр профиля
Re: Принцип построения robots для webasyst lego
« Ответ #4 : Июля 26, 2011, 09:10:09 pm »
в этой теме написан роботс
http://forum.shop-script.org/index.php?topic=25.0