1

Тема: robot.txt

Заметил , что его нет. Получается он не нужен вовсе?

2

Re: robot.txt

В последней версии были добавлены функции по генерации и управлению robots.txt из админ.панели. Раннее robots.txt можно было создать самостоятельно по FTP.

Сейчас вы можете зайти в раздел Управление->Сайты. Открыть к редактированию сайт, установить флажок "Обновить robots.txt" и сохранить сайт robots.txt будет создан автоматически. Далее в списке действий над сайтом есть действие - "редактировать robots.txt".

Повысить оценку Понизить оценку

3

Re: robot.txt

admin пишет:

В последней версии были добавлены функции по генерации и управлению robots.txt из админ.панели. Раннее robots.txt можно было создать самостоятельно по FTP.

Сейчас вы можете зайти в раздел Управление->Сайты. Открыть к редактированию сайт, установить флажок "Обновить robots.txt" и сохранить сайт robots.txt будет создан автоматически. Далее в списке действий над сайтом есть действие - "редактировать robots.txt".

У меня его нет, получается у меня более старая версия наверное. После того как я куплю лицензию я смогу обновить клиент и данная опция появится?

4

Re: robot.txt

если не сложно выложите пример файла

5

Re: robot.txt

Robots.txt - это необязательный файл, создавать его просто для наличия (если у вас нет задач, например, закрыть какие-то разделы от индексации или определить главный домен, и.т.д.) - нет смысла. А вот например, если у вашего сайта есть несколько доменов (зеркал), то в нем можно задать главный домен следующими строками:

User-agent: *
Host: ВАШ_ДОМЕН.РУ

Повысить оценку Понизить оценку

6

Re: robot.txt

Маловато строк для robots.txt, а ведь надо закрыть все ненужные ссылки типа Корзина, Сравнение товаров, Фильтры и пр.
Если все это не закрывать то в индекс попадают много ненужных страниц.
Где можно посмотреть пример правильного robots???

Повысить оценку Понизить оценку

7

Re: robot.txt

В последних версиях шаблонов - большинство лишних ссылок оформлены через атрибут data-href, вместо href,
сюда относятся ссылки - добавить в корзину, купить в 1 клик, Заказать, и др.
Таким образом поисковики их не индексируют.

Но можете дополнительно использовать еще следующий robots.txt:

User-agent: *
Disallow: /oneclick
Disallow: /register
Disallow: /auth
Disallow: /reservation
Disallow: /*?sort=*
Disallow: /*pageSize=*
Disallow: /*nsort=*
Disallow: /*viewAs*
Disallow: /*?query=*
Disallow: /*?bfilter*
Disallow: /cart

Повысить оценку +3 Понизить оценку

8

Re: robot.txt

Админ, скажите пожалуйста, где я могу увидеть карту своего магазина?

Повысить оценку Понизить оценку

9 Отредактировано Закусило Александр (14.08.2016 23:28:01)

Re: robot.txt

Ирина пишет:

Админ, скажите пожалуйста, где я могу увидеть карту своего магазина?

Посмотрите путь в настройках модуля sitemap (XML Sitemap). Конечно если речь идёт о sitemap.xml

10

Re: robot.txt

admin пишет:

В последних версиях шаблонов - большинство лишних ссылок оформлены через атрибут data-href, вместо href,
сюда относятся ссылки - добавить в корзину, купить в 1 клик, Заказать, и др.
Таким образом поисковики их не индексируют.

Но можете дополнительно использовать еще следующий robots.txt:

User-agent: *
Disallow: /oneclick
Disallow: /register
Disallow: /auth
Disallow: /reservation
Disallow: /*?sort=*
Disallow: /*pageSize=*
Disallow: /*nsort=*
Disallow: /*viewAs*
Disallow: /*?query=*
Disallow: /*?bfilter*
Disallow: /cart

Здравствуйте.

Хотел уточнить следующее.
Disallow: /*pageSize=* необходимо прописывать без знака "?" или со знаком вопроса, то есть так *?pageSize=*?

Повысить оценку Понизить оценку

11

Re: robot.txt

Если вы желаете убирать переменную pageSize в любой позиции URL, то нужно писать без вопроса.

URL же бывает разный:
/catalog/your-category/?pageSize=12
/catalog/your-category/?page=1&pageSize=12

Повысить оценку Понизить оценку