Перейти к содержимому


Robot Txt

индексирование

  • Авторизуйтесь для ответа в теме
Сообщений в теме: 3

#1 Михаил4466

Михаил4466

    Активный участник

  • Пользователи
  • PipPipPipPip
  • 343 сообщений

Отправлено 31 Январь 2013 - 07:08

Здравствуйте ,
посмотрите пожалуйста правильно ли у меня прописан robot txt, или  что то надо добавить?:

и почему нельзя добавить сайт мэп в яндекс? пишет что файл зеркало storeland.
# Документация по файлу доступна по адресу:

# http://help.yandex.r...ster/?id=996567

# Последующие строки написаны для всех роботов
User-agent: *

Allow: /catalog

Allow: /goods

# Не индексировать корзину
Disallow: /cart
# Не индексировать страницы оформленных заказов
Disallow: /order
# Не индексировать личный кабинет
Disallow: /user
# Не индексировать результаты поиска по сайту
Disallow: /search
# Не индексировать страницу сравнения товаров
Disallow: /compare
# Информация о том где находится карта сайта
Sitemap: http://nse-project.com/sitemap
http://files.storela...369/sitemap.xml

#2 Koderhan

Koderhan

    Активный участник

  • Модератоpы
  • 6 227 сообщений

Отправлено 31 Январь 2013 - 07:17

Файл robot.txt заполнен уже самым оптимальными настройками для всех пользователей по умолчанию.
Из файла "robot.txt" вам нужно удалить последнею строку на которой написан адрес до sitemap.
По умолчанию роботы находят карту сайта по адресу domine.ru/sitemap.

#3 status321

status321

    Активный участник

  • Пользователи
  • PipPipPipPip
  • 497 сообщений

Отправлено 22 Октябрь 2022 - 09:57

Доброе утро.Как запретить в robots.txt добавление товара в избранное.Фото прилагаю.

Прикрепленные изображения

  • Безымянный.png


#4 stasia

stasia

    Активный участник

  • Модераторы
  • 575 сообщений

Отправлено 24 Октябрь 2022 - 15:32

Просмотр сообщенияstatus321 (22 Октябрь 2022 - 09:57) писал:

Доброе утро.Как запретить в robots.txt добавление товара в избранное.Фото прилагаю.

Здравствуйте. Зайдите в раздел Сайт---robots.txt, и найдите код:  
# Информация о том где находится карта сайта

И перед ним добавьте код:    
# Последующие строки написаны для всех роботов
User-agent: *
# Не индексировать корзину
Disallow: /cart
# Не индексировать страницы оформленных заказов
Disallow: /order
# Не индексировать личный кабинет
Disallow: /user
# Не индексировать результаты поиска по сайту
Disallow: /search
# Не индексировать страницу сравнения товаров
Disallow: /compare
# Не индексировать страницу установки cookie файлов на не основных доменах магазина
Disallow: /setcookie
# Не индексировать страницу установки cookie файлов на не основных доменах магазина
Disallow: /favorites






Темы с аналогичным тегами индексирование

Количество пользователей, читающих эту тему: 0

0 пользователей, 0 гостей, 0 анонимных