Сообщений в теме: 49

[Morduar]

После индексирования сайта в Яндексе, все страницы исключая главной и робот.тхт ушли гулять...
По причине:
Документ не является каноническим
В коде документа в тэге link содержится параметр rel="canonical", указывающий на другой (канонический) документ. Вместо данного документа проиндексирован канонический.
Моих знаний не достаточно для того чтобы понять как это исправить, кроме как удалить тот самый тег из шаблон файла.
Но тут возникает другая беда, если каталог имеет категории,а у этих категорий есть еще подкатегории, то кол.-во страниц в индексировании достигает чуть ли не тысячных вариантов.
За это как я понимаю банят.
В общем прошу помочь.
Спасибо всем.

[vadim_3383]

Morduar (30 Август 2011 - 00:15) писал:

После индексирования сайта в Яндексе, все страницы исключая главной и робот.тхт ушли гулять...
По причине:
Документ не является каноническим
В коде документа в тэге link содержится параметр rel="canonical", указывающий на другой (канонический) документ. Вместо данного документа проиндексирован канонический.
Моих знаний не достаточно для того чтобы понять как это исправить, кроме как удалить тот самый тег из шаблон файла.
Но тут возникает другая беда, если каталог имеет категории,а у этих категорий есть еще подкатегории, то кол.-во страниц в индексировании достигает чуть ли не тысячных вариантов.
За это как я понимаю банят.
В общем прошу помочь.
Спасибо всем.

Почитайте эту тему Дубли страниц поможет

[Morduar]

Читал еще до своего поста.
Этот тег то, я как раз и удалил.

[velena168]

И я сегодня, мягко сказать, удивилась. 207 ошибок!
И тоже не знаю как исправить.

Только заказы стабильно пошли. Пожалуйста, помогите.

Прикрепленные изображения

• 

[support]

velena168 (01 Сентябрь 2011 - 13:27) писал:

И я сегодня, мягко сказать, удивилась. 207 ошибок!
И тоже не знаю как исправить.

Только заказы стабильно пошли. Пожалуйста, помогите.

Ошибки который видны на скриншоте - это отфильтрованные дубли страниц, в индексе остаются только одна страница товара, уникальная. Вот здесь как раз описывали как это работает на примере шаблона:
http://forum.storela...ndpost__p__4276

[velena168]

support (02 Сентябрь 2011 - 19:24) писал:

Ошибки который видны на скриншоте - это отфильтрованные дубли страниц, в индексе остаются только одна страница товара, уникальная. Вот здесь как раз описывали как это работает на примере шаблона:
http://forum.storela...ndpost__p__4276

Так значит, фактически это не ошибки? Т. е., если у меня будет 1000 товаров, то будет 1000 ошибок? Странно, если Я. рекомендует этот Тэг, то почему считает за ошибку? Или я чего-то не понимаю...

[support]

velena168 (03 Сентябрь 2011 - 09:40) писал:

Так значит, фактически это не ошибки? Т. е., если у меня будет 1000 товаров, то будет 1000 ошибок? Странно, если Я. рекомендует этот Тэг, то почему считает за ошибку? Или я чего-то не понимаю...

Может быть и больше тысячи, если каждый товар будет размещён в нескольких категориях. Если товар размещён в одной категории, то ссылка на него всегда будет одна, без from на конце. Он эту информацию там выводит для того чтобы пользователи видели что эта страница не выдаётся поисковиком по причине того, что это дубликат. Если там не говорить об этом, то вопросов в саппорт яндекса будет очень много вида: "почему в выдачу не попадает такая-то страница?"

[velena168]

support (13 Сентябрь 2011 - 18:56) писал:

Может быть и больше тысячи, если каждый товар будет размещён в нескольких категориях. Если товар размещён в одной категории, то ссылка на него всегда будет одна, без from на конце. Он эту информацию там выводит для того чтобы пользователи видели что эта страница не выдаётся поисковиком по причине того, что это дубликат. Если там не говорить об этом, то вопросов в саппорт яндекса будет очень много вида: "почему в выдачу не попадает такая-то страница?"

Спасибо!

[Flor@@@]

У меня похожая ситуация, тоже не пойму надо ли волноваться или нет?
загружено роботом 234 страницы, исключено 27, страниц в поиске 29. Я попала под АГС фильтр? или это просто не полностью проиндексировался сайт?

Прикрепленные изображения

• 

[Nik-nik]

support (13 Сентябрь 2011 - 18:56) писал:

Может быть и больше тысячи, если каждый товар будет размещён в нескольких категориях. Если товар размещён в одной категории, то ссылка на него всегда будет одна, без from на конце. Он эту информацию там выводит для того чтобы пользователи видели что эта страница не выдаётся поисковиком по причине того, что это дубликат. Если там не говорить об этом, то вопросов в саппорт яндекса будет очень много вида: "почему в выдачу не попадает такая-то страница?"

У меня такая проблема - яндекс выкинул много страниц с товарами из поиска по причине их "неканоничности", среди них практически все с входимостью в 1 категорию, но почему-то с from в окончании. Как итог - на сайте страницы товара без from нет, и, соответственно, в поиске тоже... Проблема! Подскажите, как убрать этот злосчастный from и вернуть страницам их каноничность...
Как пример: http://bizhu-city.ru...к-Юно?from=YjI0 - находится только в одной категории, но выкидывается из поиска, так как не является каноническим

[Nik-nik]

Служба поддержки - прошу откликнуться!

[Kotofeeva]

Присоединяюсь и требую ответа. Тему про дубли страниц прочитала, проблема не решена. Я регулярно оплачиваю пользование вашим ресурсом, но помощи не получаю. Яндекс отказывается индексировать большую часть моего сайта из-за некононичности некоторых (многих!!!) страниц. Техподдержка вообще планирует как-то решать эту проблему?

[Flor@@@]

Kotofeeva (06 Март 2012 - 01:27) писал:

Присоединяюсь и требую ответа. Тему про дубли страниц прочитала, проблема не решена. Я регулярно оплачиваю пользование вашим ресурсом, но помощи не получаю. Яндекс отказывается индексировать большую часть моего сайта из-за некононичности некоторых (многих!!!) страниц. Техподдержка вообще планирует как-то решать эту проблему?

и у меня 363 неканонических страницы.

[support]

Kotofeeva (06 Март 2012 - 01:27) писал:

Техподдержка вообще планирует как-то решать эту проблему?

Проблема эта давно решена, объясню суть. Для каждой страницы существует специальный тег который сообщает поисковым системам где расположен оригинал страницы. Например есть страница:

http://site.ru/goods/tovar

.
Если поставить ссылку на неё, но с указанием каких либо параметров, или добавить дополнительных символов, которые нужны для вычислений на этой странице, либо просто нравятся тому пользователю который ставит ссылку, например:

http://site.ru/goods/tovar/
http://site.ru/goods/tovar//////
http://site.ru/goods/tovar/?1234
http://site.ru/goods/tovar/?from=123123
http://site.ru/goods/tovar?asdfaew=1
http://site.ru/goods/tovar?asfd...

То поисковая система перейдя по ним увидит что эти страницы канонические, оригинал вот этот:

http://site.ru/goods/tovar

И размещать в поисковой выдаче нужно только его, весь вес со всех дубликатов нужно перекидывать так же на оригинал. Это повышает позиции в поисковой выдаче и позволяет исключить ситуации не правильного склеивания поисковыми системами.

Всё дело в том что каноническая страница является дубликатом оригинала страницы и поэтому система сообщает поисковому роботу о том что индексировать её не нужно, а вес который на неё приходится нужно передать на оригинал страницы. Если пользователь с другого сайта поставит на не правильный адрес ссылку, то поисковик правильно посчитает вес и полностью передаст его оригиналу страницы.

Дубли плохо влияют на поисковое продвижение, поэтому в системе специально был введён механизм, для того чтобы на сайте их не было. Используется этот тег потому что например на страницу товара могут ссылаться различные категории (один товар одновременно может располагаться в нескольких категориях) и для того чтобы определить откуда пришёл пользователь, из какой категории, в URL адресе товара присутствует переменная ?from= из-за этого для одного товара может получаться несколько адресов с переменной from. Это сделано для лучшей навигации пользователя по сайту и большего удобства для него. Если товар находится лишь в одной категории, то данная переменная к нему не добавляется.


Убрать механизм указания оригинала страницы можно удалением из раздела "Сайт" > "Редактор тем" шаблон "HTML" кода:

  <!-- SEO параметр определяющий главную страницу для фильтрации её дублей -->
  {% IF PAGE_CANONICAL %}
	<link rel="canonical" href="{PAGE_CANONICAL}" />
  {% ENDIF %}

Дополнительная информация по теме:
Что такое каноническая страница? Зачем нужно указывать каноническую страницу?

Каноническая страница представляет собой предпочитаемую версию из набора страниц с очень похожим содержанием.

На сайтах часто бывает несколько страниц, перечисляющих один и тот же набор продуктов. В частности, на одной странице продукты могут быть указаны в алфавитном порядке, а на других – упорядочены по цене или рейтингу. Рассмотрим пример.

http://www.example.com/product.php?item=swedish-fish&trackingid=1234567&sort=alpha&sessionid=5678asfasdfasfd

http://www.example.com/product.php?item=swedish-fish&trackingid=1234567&sort=price&sessionid=5678asfasdfasfd

Если поисковик будет знать о том, что содержание этих страниц одинаково, то сможет добавить в результаты поиска только одну из них. Наши алгоритмы выбирают ту страницу, которая, по нашему мнению, лучше всего отвечает на запрос пользователя. Тем не менее, теперь пользователи могут указывать поисковым системам каноническую страницу, добавив элемент <link> с атрибутом rel="canonical" в раздел<head> неканонической версии страницы. Добавление этой ссылки и атрибута позволяет владельцам сайтов определять наборы идентичного содержания и сообщать поисковику: "Из всех страниц с идентичным содержанием эта является наиболее полезной. Установите для нее наивысший приоритет в результатах поиска."

Как указать канонический URL?

Указать канонический URL можно двумя способами.

Добавив ссылку rel="canonical" в раздел <head> неканонических версий всех страниц HTML.
Чтобы задать каноническую ссылку на страницу

http://www.example.com/product.php?item=swedish-fish

, создайте элемент <link> следующим образом:

<link rel="canonical" href="http://www.example.com/product.php?item=swedish-fish"/>

Скопируйте эту ссылку в раздел <head> всех неканонических версий страницы, например http://www.example.c...ish&sort=price.

Если вы размещаете содержание как по адресу

http://www.example.com/product.php?item=swedish-fish

, так и по адресу

https://www.example.com/product.php?item=swedish-fish

, можно указать каноническую версию этой страницы. Создайте элемент <link>:

<link rel="canonical" href="http://www.example.com/product.php?item=swedish-fish"/>

Добавьте эту ссылку в раздел <head> страницы

https://www.example.com/product.php?item=swedish-fish

.

Указав каноническую версию URL с помощью HTTP-заголовка

Link rel="canonical"

. Описанный выше способ, при котором

rel="canonical"

добавляется в раздел head страницы, удобно использовать для содержания в формате HTML, однако он не подходит для файлов PDF и файлов других типов, индексируемых веб-поиском Google. В таких случаях канонический URL можно указать с помощью атрибута Link

rel="canonical"

в HTTP-заголовке (обратите внимание, что в этом случае необходимо иметь доступ к настройкам сервера), например:

Link: <http://www.example.com/downloads/white-paper.pdf>; rel="canonical"

    
В настоящее время поисковики поддерживают элемент заголовка link только для веб-поиска.

Обязательно ли использовать атрибут rel="canonical"?

Эта новая возможность позволяет владельцам сайтов указать версию страницы, которую поисковик будет считать канонической. Поисковик учтет это вместе с другими признаками при определении того, какие наборы URL имеют идентичное содержание, и выборе наиболее релевантной страницы для отображения в результатах поиска.

Должна ли эта ссылка быть абсолютной или относительной?

rel="canonical" можно использовать и для абсолютных, и для относительных ссылок, но мы рекомендуем использовать абсолютные ссылки для уменьшения возможной путаницы и других сложностей. Если в документе указана базовая ссылка, то все относительные ссылки будут вычисляться на ее основе.

Должно ли содержание набора страниц быть сходным с содержанием канонической версии?

Да. Атрибут rel="canonical" следует использовать только для выбора предпочитаемой версии из множества страниц с идентичным содержанием (хотя небольшие различия, например в порядке сортировки, допустимы).

Например, если на сайте есть несколько страниц с одной и той же моделью танцевальной обуви, которые различаются только цветом обуви на рисунке, имеет смысл сделать канонической страницу с самым популярным цветом, чтобы она с наибольшей вероятностью была показана в результатах поиска Google. Однако не следует использовать атрибут rel="canonical", если владелец сайта просто хочет, чтобы у страницы с гелевыми стельками был более высокий рейтинг, чем у страницы с обувью.

Что, если атрибут rel="canonical" указывает на несуществующую страницу? А если каноническими назначено несколько страниц набора?

Как и раньше, мы будем стараться определять соответствующую каноническую страницу алгоритмически.

Может ли Google проследить цепь назначений rel="canonical"?

До определенного предела – да, но в целях оптимального использования канонической версии настоятельно рекомендуется обновлять ссылки так, чтобы они указывали на единственную каноническую страницу.

Можно ли использовать атрибут rel="canonical" для указания канонического URL на другом домене?

В некоторых случаях настроить переадресацию непросто. Например, пусть требуется выполнить переход на новое имя домена на веб-сервере, который не поддерживает переадресацию. В таком случае можно использовать элемент ссылки rel="canonical", чтобы указать точный URL-адрес предпочтительного домена для индексации. Несмотря на то, что элемент ссылки rel="canonical" рассматривается как подсказка, а не как строгая инструкция, Google следует ему по мере возможности.


Видео по теме:

[Flor@@@]

support (13 Сентябрь 2011 - 18:56) писал:

Может быть и больше тысячи, если каждый товар будет размещён в нескольких категориях. Если товар размещён в одной категории, то ссылка на него всегда будет одна, без from на конце. Он эту информацию там выводит для того чтобы пользователи видели что эта страница не выдаётся поисковиком по причине того, что это дубликат. Если там не говорить об этом, то вопросов в саппорт яндекса будет очень много вида: "почему в выдачу не попадает такая-то страница?"

так я не против ,если бы просто было бы больше 1000 дублей, и при этом "основные" страницы = НЕ ДУБЛИ индексировались бы, а у меня получается, что кровати-машины R800 (6 штук) не индексируется вообще, они просто попали в дубли и все.

[Flor@@@]

давайте тогда ближе к делу. Вот пример:
http://otdyh-i-son.r...арт-Д?from=ZGJj

Данный товар присутствует на моем сайте в 3 категориях. какие конкретные действия я должна выполнить, чтобы товары на сайте индексировались нормально? 

[support]

katteee (07 Март 2012 - 13:53) писал:

так я не против ,если бы просто было бы больше 1000 дублей, и при этом "основные" страницы = НЕ ДУБЛИ индексировались бы, а у меня получается, что кровати-машины R800 (6 штук) не индексируется вообще, они просто попали в дубли и все.

katteee (07 Март 2012 - 14:01) писал:

давайте тогда ближе к делу. Вот пример:
http://otdyh-i-son.r...арт-Д?from=ZGJj

Данный товар присутствует на моем сайте в 3 категориях. какие конкретные действия я должна выполнить, чтобы товары на сайте индексировались нормально? 

Думаю проблема "не индексации" сайта может быть в другом, т.к. яндексу адрес данной страницы известен:
Открываем http://otdyh-i-son.ru/robots.txt
Там он видит ссылку на карту сайта: http://otdyh-i-son.ru/sitemap
В ней видит ссылку на страницу вашего товара:

<url>
<loc>
http://otdyh-i-son.ru/goods/%D0%9A%D1%80%D0%BE%D0%B2%D0%B0%D1%82%D1%8C-%D0%A1%D1%82%D0%B0%D0%BD%D0%B4%D0%B0%D1%80%D1%82-%D0%94
</loc>
</url>

Т.е. проблем с нахождением данной страницы, не смотря ни на что у поисковика не возникает. Аналогично он видит эту ссылку в теге canonical. Причина на мой взгляд заключается в контенте, который не уникален, например берём первую строчку из описания, забиваем в поисковик, видим результат, 4 одинаковых сайта, ваш есть в выдаче, т.е. есть вероятность что сайта нет в выдаче яндекса как раз по причине не уникальности контента. Если брать другие страницы сайта, то они так же не уникальны, например если проверить несколько товаров через copyscape.com:
http://www.copyscape...2%D0%BE%D1%80-1
http://www.copyscape...%D0%9F%D0%A3-BS
http://www.copyscape...%BB%D1%8E%D1%81

То сразу находим с десяток сайтов с тем же контентом. Яндекс в последнее время очень строг с копированием и исключает из выдачи дублирующие контент сайты. Для того чтобы он определял что контент был написан Вами он так же как и гугл создал специальную форму. Вот небольшое описание того как это работает: http://help.yandex.r...1120756#1120759

Возможно сайт отвалился по ещё каким-либо причинам, например из-за изменений в поисковых алгоритмах яндекса, это так же может быть причиной "не индексирования", после 1-2х апдейтой сайт обычно появляется в выдаче (По крайней мере это наш опыт, если сайт не нарушает лицензию яндекса) Дополнительно для того чтобы понять причину можно теребить поддержку яндекса, они часто отвечают шаблонами, но возможно попадётся хороший добрый ответственный оператор сидящий за Платоном Щукиным и ответит нормально, проверит почему же на самом деле сайт отвалился.

Причин может быть много, но я могу Вас уверить на 100%, что это не из-за тега canonical, он помогает индексации. Он лишь рекомендует оригинал, никак не выкидывает страницы из поиска.

[Flor@@@]

то есть вы считаете, что 363 страницы попали в дубли из-за неоригинального контента?

[support]

katteee (07 Март 2012 - 19:41) писал:

то есть вы считаете, что 363 страницы попали в дубли из-за неоригинального контента?

Нет, я так не считаю. У всех этих 363 страниц указана точная причина ошибки - фильтрация по тому что их URL адрес не является оригиналом страницы. А оригинал в выдаче не отображается, вероятно по причине дублирования контента на вашем сайте с другого сайта. Возможны и другие причины, о чём я писал выше.

Нужно найти оригинал страницы, в списках страниц загруженных яндексом. Возможно рядом с информацией о этой странице в Яндекс.Вебмастере уже написана причина почему она не выводится в поисковой выдаче, если этой информации там нет, то нужно спросить тех.поддержку яндекса почему эта страница не выводится в поисковой выдаче.

[Flor@@@]

support (07 Март 2012 - 20:14) писал:

Нет, я так не считаю. У всех этих 363 страниц указана точная причина ошибки - фильтрация по тому что их URL адрес не является оригиналом страницы. А оригинал в выдаче не отображается, вероятно по причине дублирования контента на вашем сайте с другого сайта. Возможны и другие причины, о чём я писал выше.

Нужно найти оригинал страницы, в списках страниц загруженных яндексом. Возможно рядом с информацией о этой странице в Яндекс.Вебмастере уже написана причина почему она не выводится в поисковой выдаче, если этой информации там нет, то нужно спросить тех.поддержку яндекса почему эта страница не выводится в поисковой выдаче.

а как найти эти оригиналы???