Ускорить обход и индексацию большого каталога в Google и Яндексе — внедрение под ключ

Ищем технического SEO-специалиста с опытом крупных каталогов/маркетплейсов и желательно Python/Django. Нужен не аудит и не список рекомендаций, а полное решение проблемы: самостоятельно найти причины медленного обхода и неиндексации, внести необходимые изменения в сайт и довести работу до измеримого результата в Google и Яндексе. .

Сейчас по Google Search Console: 6 837 страниц в индексе, 15 113 не индексируются, Googlebot обходит ориентировочно около 230 URL в сутки. Каталог постоянно растёт: ежедневно добавляются статьи и карточки оборудования, а при подключении крупного поставщика могут одновременно появляться сотни или тысячи новых карточек.

В Яндекс Вебмастере критических ошибок нет, но есть отдельные SEO-проблемы, включая дубли description. . Необходимо разобраться, куда расходуется crawl budget, какие URL поисковые роботы обходят, какие SEO-ценные страницы остаются в очереди и почему.

Проверить серверные логи Googlebot/YandexBot, sitemap, robots.txt, canonical, пагинацию, дубли, внутреннюю перелинковку, скорость ответа сервера, HTTP-коды и другие технические факторы.

Если требуется — внедрить отдельный sitemap для новых/изменённых страниц, корректный lastmod, IndexNow для Яндекса, усилить обнаружение новых карточек через категории/производителей/страницы новинок и другие технические решения.

Важно: исполнитель должен сам внедрить изменения в Python/Django либо чётко указать до заказа, какие работы не сможет выполнить самостоятельно. Работа не считается выполненной после слов «провёл аудит» или «дал рекомендации». .

Критерии приёмки работы: Все URL сайта разделены на группы: SEO-ценные и предназначенные для индексации / технические и не предназначенные для индексации, с конкретным количеством URL в каждой группе.

Для 100% SEO-ценных типов страниц устранены выявленные технические препятствия: ошибочные robots/noindex, canonical, sitemap, дубли, ошибки HTTP, проблемы перелинковки и другие найденные причины. Sitemap содержит только корректные индексируемые URL. Новые и изменённые страницы автоматически и своевременно попадают в sitemap.

Для Яндекса внедрён автоматический механизм быстрого уведомления о новых/изменённых URL, включая IndexNow, если он применим. По серверным логам показано, какой процент обходов Googlebot и YandexBot идёт на полезные SEO-страницы, а какой — на технические/мусорные URL. Нецелевой обход должен быть максимально сокращён.

Берётся контрольная выборка минимум 100 SEO-ценных URL разных типов. Не менее 95 из 100 должны технически корректно отдаваться поисковым роботам: HTTP 200, правильный canonical, отсутствие ошибочной блокировки, наличие внутренних ссылок и корректное присутствие в sitemap.

После внедрения новые карточки должны автоматически получать правильную внутреннюю перелинковку и быть доступны роботам без необходимости ручной работы.

Предоставляется короткая таблица «было → стало» отдельно по Google и Яндексу: скорость обхода, количество проиндексированных/неиндексированных SEO-ценных страниц, причины исключений, crawl efficiency и перечень реально внесённых изменений. Через согласованный контрольный период проверяем динамику.

Цель — устойчивое сокращение очереди SEO-ценных страниц вне индекса и рост скорости обнаружения новых карточек, а не разовый всплеск обхода.

Отдельно прошу в отклике написать: что конкретно Вы будете делать, какие доступы потребуются, какие показатели готовы зафиксировать как результат и какие аналогичные задачи на каталогах 10 000+ URL уже решали. . «Отклики в формате “проведу SEO-аудит и дам рекомендации” не рассматриваем.

Нужен специалист, который берёт задачу до фактического внедрения и измеримого технического результата.»