Обратился сайт megacable с проблемой индексации, а именно, — страницы часто выпадают из индекса яндекса, в результате чего, даже половины карточек товаров постоянно нет в индексе.
SEO аудит, проблема: индексирование, выпадение из индекса поисковых систем
После проведённого SEO аудита сайта, было выявлено ряд проблемных мест, но ключевой причиной выпадения из индекса стали два фактора:
Первая причина удаления страниц из индекса поисковых систем — наличие большого числа дублей контента одних и тех же карточек товаров с разным url, без корректного указания важного элемента rel=canonical.
Новые созданные страницы (карточки товаров) имеют более короткий url и содержат параметр каноникализации на себя самих, в то время как, старые, ранее созданные карточки товаров не имеют элемента rel=canonical, и не передают этот параметр на новые созданные страницы. Получается, что в индекс Яндекса одновременно на индексацию направляются новые и ранее созданные одинаковые страницы, так как в индексе есть старые страницы, при том хорошо ранжируются, новые страницы с одинаковым контентом просто получают статус Малоценные или маловостребованные страницы, и соответственно, выпадают из индекса.
Вторая причина контент карточек товаров, который содержит в среднем на 50% меньшее число символов, чем страницы конкурентов, это также касается в структуре, — монограмм, биграмм и триграмм.
Причина третья, из-за особенностей используемого движка сайта или других технических факторов, на каждой странице есть «много шума», который нужно чистить: например, слово «файл» добавляет корректировку в семантику текста на каждой странице.
rel=canonical — элемент канонической ссылки — это элемент HTML, который помогает веб-мастерам предотвращать проблемы с дублированием контента при поисковой оптимизации, указывая «каноническую» или «предпочтительную» версию веб-страницы. Он описан в RFC 6596, опубликованном в апреле 2012 года.
