Диагностика и исправление ошибок валидации источников в панели Яндекс.Вебмастера

Яндекс.Вебмастер ⎯ это инструмент для анализа и оптимизации сайтов, который помогает выявить и исправить ошибки валидации источников.

С помощью Яндекс.Вебмастера вы можете проверить сайт на наличие ошибок валидации и получить рекомендации по их исправлению.

Валидация источников ⎯ это процесс проверки соответствия содержимого сайта требованиям поисковых систем.

В этом разделе мы расскажем о том, как использовать Яндекс.Вебмастер для диагностики и исправления ошибок валидации источников.

Вы узнаете, как добавить сайт в Яндекс.Вебмастер, подтвердить права на него и настроить индексацию.

Также мы расскажем о том, как анализировать отчеты о проблемах сайта и использовать инструменты Яндекс.Вебмастера для исправления ошибок.

После прочтения этого раздела вы сможете самостоятельно проверить сайт на наличие ошибок валидации и исправить их с помощью Яндекс.Вебмастера.

Что такое валидация источников

Валидация источников — это процесс проверки корректности данных, которые сайт предоставляет для индексации в Яндексе. Ошибки возникают, когда структура данных не соответствует техническим требованиям поисковой системы. Например, некорректная микроразметка, проблемы с XML-картами или нарушения в Турбо-страницах могут привести к тому, что Яндекс не сможет правильно обработать контент. Это влияет на отображение сайта в результатах поиска и доступность информации для пользователей.

Яндекс.Вебмастер отслеживает три категории ошибок: критические, фатальные и предупреждения. Критические ошибки требуют срочного исправления, так как блокируют индексацию; Фатальные ошибки указывают на серьезные нарушения, например, некорректный формат данных. Предупреждения не останавливают индексацию, но снижают эффективность отображения контента. Например, дублирование микроразметки (JSON-LD и Microdata на одной странице) может запутать алгоритмы, а ошибки в XML-файлах — привести к пропуску страниц из индекса.

Источники данных для валидации включают:

• Турбо-страницы — должны точно повторять структуру и контент основного сайта. Любые отличия, включая неподдерживаемые элементы, фиксируются как ошибки.
• XML-файлы — валидация проверяет соответствие схеме (XSD), отсутствие битых ссылок и корректный формат дат.
• robots.txt, файл должен разрешать доступ к важным разделам сайта и исключать конфиденциальные данные.
• Микроразметка — данные в формате Schema.org или microdata должны быть структурированы без синтаксических ошибок. Например, цена товара указывается числом, а не текстом.

Для диагностики Яндекс использует автоматические проверки, которые обновляются ежедневно. Если вы исправите ошибку, она исчезнет из отчета после повторного сканирования сайта. Это занимает от нескольких часов до нескольких дней. Инструменты вроде валидатора микроразметки помогают находить проблемы до публикации контента, что сокращает время на исправления.

Наличие ошибок не блокирует индексацию сразу, но игнорирование проблем снижает шансы на высокую позицию в выдаче. Например, некорректная разметка продукта может помешать отображению в Rich-сниппетах. Регулярная проверка источников через Яндекс.Вебмастер позволяет поддерживать сайт в оптимальном состоянии и избежать потери трафика.

Как находить ошибки валидации

Для поиска ошибок валидации в Яндекс.Вебмастере необходимо добавить сайт и подтвердить права на него.

После этого в разделе «Проблемы сайта» будут отображаться все ошибки валидации, найденные Яндексом.

Также можно использовать инструмент «Валидатор микроразметки» для проверки корректности микроразметки на сайте.

Для более подробной диагностики можно использовать API Яндекс.Вебмастера.

С помощью этих инструментов можно быстро и эффективно находить и исправлять ошибки валидации на сайте.

Использование отчета Проблемы сайта

Панель «Проблемы сайта» в Яндекс.Вебмастере строится на ежедневном автосканировании и показывает конкретные ошибки, а не общие предупреждения. Сразу после входа в раздел вы видите три типа событий: критические блокирующие, фатальные и предупреждения. Каждая деталь подписана: где именно произошел сбой, код строки или URL-адрес, краткое описание и ссылка на официальную инструкцию.

Чтобы быстро отфильтровать ошибки, нажмите на иконку фильтра в шапке блока. можно отсортировать по типу файла: разметка Schema.org, Tur­bo-страницы, XML-карты, robots.txt. Кликнув по строке, переходите к детальному таймлайну: когда бот зафиксировал проблему и как она менялась каждые 24 часа.

Самая полезная опция — кнопка «Я исправил». Нажмите её сразу после внесения изменений, чтобы отправить запрос на повторное сканирование. Кнопка активна только после фактического исправления ошибки, иначе система покажет то же сообщение, но не снизит приоритет проверки.

После подтверждения исправления Яндекс обходит страницу в течение 2–12 часов, в зависимости от частоты обновлений сайта. Если ошибка исчезла, строка в отчете пропадает и меняется общий счетчик. Именно так можно точно узнать, что действие сработало, а не ждать произвольный срок.

Экономьте время используйте экспорт. Отчет «Проблемы сайта» можно выгрузить кнопкой «CSV». Файл со списком URL и типами ошибок открывается в таблицах, где сразу можно ставить метки о готовности или передавать задачу подрядчику;

Диагностика через API Яндекс.Вебмастера

API Яндекс.Вебмастера позволяет автоматизировать поиск ошибок валидации для крупных сайтов. Чтобы начать работу, зарегистрируйте приложение в OAuth-системе Яндекса и получите токен. Авторизация выполняется через заголовок Authorization: OAuth <ваш_токен>. Для каждого сайта потребуется его идентификатор, который можно найти в интерфейсе Вебмастера.

Метод GET /v4/user/{user-id}/hosts возвращает список подтвержденных доменов. Выберите нужный и используйте его ID в запросах. Для получения ошибок валидации вызовите GET /v4/user/{user-id}/hosts/{host-id}/validation/issues. Ответ содержит список проблем с полями: тип ошибки (critical/fatal/warning), URL, код ошибки и описание. Например, SCHEMA_ORG_MICRODATA_DUPLICATE указывает на дублирование микроразметки.

Фильтруйте данные через параметры запроса:

• issue_type, укажите тип ошибки (schema_org, turbo, robots_txt и др.)
• state — выберите статус (active, resolved)
• limit и offset — пагинация для больших списков

API обновляет данные ежедневно, как и веб-интерфейс. После исправления ошибок отправьте POST-запрос /v4/user/{user-id}/hosts/{host-id}/validation/refresh, чтобы ускорить повторную проверку. Ответ возвращает код задачи, статус которой можно отслеживать через GET /v4/user/{user-id}/tasks/{task-id}.

Пример кода на Python для получения ошибок валидации:

 
import requests 

host_id = 'ваш_host_id' 
token = 'ваш_oauth_токен' 

url = f'https://api.webmaster.yandex.net/v4/user/~/hosts/{host_id}/validation/issues' 
headers = {'Authorization': f'OAuth {token}'} 

response = requests.get(url, headers=headers) 
print(response.json) 

Интеграция API в рабочий процесс позволяет отслеживать ошибки в реальном времени и автоматически уведомлять команду о проблемах. Например, можно настроить скрипт, который каждые 24 часа проверяет наличие критических ошибок и отправляет уведомления в Slack или Telegram. Это снижает время на диагностику и минимизирует потери трафика.

Распространенные ошибки валидации

Наиболее частые ошибки валидации в Яндекс.Вебмастере: дублирование микроразметки (JSON-LD и Microdata), несоответствие Турбо-страниц, проблемы с robots.txt и XML-файлами. Эти ошибки влияют на индексацию и отображение сайта в поиске.

Дублирование микроразметки возникает, когда на странице одновременно используются разные форматы, например, JSON-LD и Microdata для Product. Это запутывает алгоритмы. Решение: удалите один из форматов, оставив, например, JSON-LD.

Турбо-страницы часто не соответствуют основным. Они должны повторять структуру и контент оригинальной страницы. Отличия или неподдерживаемые элементы фиксируются как ошибки. Проверяйте обновление источников Турбо-страниц.

Проблемы с robots.txt возникают, если файл блокирует доступ к важным разделам. Например, для разрешения /feed/turbo/ добавьте строку Allow: /feed/turbo/ в robots.txt. Ошибки XML-файлов включают неверную схему валидации или битые ссылки.

Критические ошибки блокируют индексацию, фатальные требуют срочного исправления. Предупреждения снижают эффективность отображения. Регулярная проверка через Яндекс.Вебмастер помогает поддерживать сайт в оптимальном состоянии.

Дублирование микроразметки

Ошибка дублирования микроразметки возникает, когда на одной странице используются разные форматы для описания одного и того же контента. Например, одновременно могут быть заданы JSON-LD и Microdata для сущности Product. Это создает неоднозначность для поисковых алгоритмов: данные дублируются, а разные форматы могут содержать противоречивые значения.

Яндекс.Вебмастер фиксирует такие случаи как критические ошибки. Пример кода с проблемой:

 
 
 
 Товар 
 

 

Для устранения удалите один из форматов. Предпочтительнее оставить JSON-LD: он проще в поддержке и меньше подвержен ошибкам при редактировании. Исправленный код:

Ключевые моменты:

• availability — замените текстовые обозначения наличия (например, «В наличии») на стандартизированные значения из Schema.org.
• price — указывайте цену числом, без валютного символа.
• priceCurrency — задавайте код валюты по стандарту ISO 4217 (например, RUB).

После исправления отправьте запрос на повторную проверку через интерфейс Яндекс.Вебмастера или API. В интерфейсе нажмите «Я исправил» в строке с ошибкой. Через API используйте метод /v4/user/{user-id}/hosts/{host-id}/validation/refresh. Повторное сканирование занимает 2–12 часов, после чего статус ошибки обновится.

Регулярно проверяйте микроразметку через валидатор Яндекса. Инструмент показывает синтаксические ошибки и несоответствия схеме. Это позволяет выявлять проблемы до публикации контента, что снижает риски потери трафика из-за некорректного отображения в сниппетах.

Несоответствие Турбо-страниц

Турбо-страница считается несоответствующей, если её контент отличается от оригинала хотя бы на 1 %. Алгоритм сравнивает теги title, текстовые блоки, цены и изображения. Различие выявляется масштабной лингвистико-семантической проверкой, которая отрабатывает за 2–3 минуты после получения свежего фида.

Валидатор прикладывает фид к исходной странице и строит diff-отчёт. Список отличий выглядит так: отсутствующий заголовок h1, лишний блок комментариев, цена 1990 RUB вместо 1790 RUB. Все строки нумеруются, чтобы вы сразу видели место расхождения.

Чаще всего ошибку вызывают три причины. Первое — RSS генерируется кэшем, обновляющимся раз в час, а сайт уже изменился. Второе — поле turbo:content подменяется из старой базы. Третье — в фиде сохраняются устаревшие пути к файлам медиа, которые на диске уже 404.

Исправление имеет два шага. Откройте панель “Фиды” в Вебмастере, найдите красную метку “Несоответствие” и нажмите подключить автообновление: система запросит ссылку вида https://site.ru/feed/turbo/ и период reload в минутах. Далее сделайте генерацию кеша динамической, чтобы каждый запрос бота приводил к свежему фиду;

Дождитесь перераспространения — алгоритм закэширует обновлённый фид за 1–2 часа и подтвердит исправление зелёной меткой. Такой цикл занимает максимум 6 часов и снижает риск потери позиций в мобильной Турбо-выдаче.

Проблемы с robots.txt

Файл robots.txt содержит правила для ограничения индексации и сканирования сайта поисковыми системами. Если он настроен неправильно, боты Яндекс.Вебмастер могут не в счет или пересчитывают страницы, что влияет на ранжирование и показатель индексации. Часть проблем находится в панели «Проблемы сайта»: там отображаются ссылки на отдельные страницы, которые не доступны из-за установки блокировки в robots.txt.

Ошибкой также является использование полной вложенности дочерних директорий. Например, такая строка в robots.txt не позволяет ботам попасть на страницы категории: Disallow: /category/*. Если эту директорию разрешат, обновится индексация и рейтинг страниц.

Желательно, если robots.txt включает следующие оптимальные разрешения:

• Allow: /feed/turbo/. Разрешает обход Турбо-страниц блокированного фида. Удалив эту директиву, активируется TikTok-подписка на обновления из фида. Но убедитесь, что в последней версии файла строки не поменялись: могут быть закомментированы или удалены, если нет поддержки Турбо.
• Allow: /robots.txt. Позволяет просматривать файл закрытого на просмотр для ботов сайта.
• Allow: /sitemap.xml. Открывает доступ карте сайта для индексации.
• Allow: /cf_scripts/. Иногда нужно разрешить директорию с веб-скриптами, которые должны индексироваться.
• Disallow: /user. Запрещает ходить по страницам личного кабинета пользователей.
• Disallow: /*.xls. Если данные в Excel не нужны для поиска, то можно заблокировать сканирование.

Чтобы упростить диагностику, можно воспользоваться валидатором robots.txt в Яндекс.Вебмастере: он проверяет соответствие файла стандартам и предлагает рекомендации по улучшению.

Ошибки в XML-файлах

Яндекс.Вебмастер предоставляет раздел «Инструменты» и функцию «Исправить ошибки в XML-файлах». После загрузки вашей карты сайта (sitemap.xml) система выдаст отчет: если какой-либо URL возвращает код ошибки, помимо 200 OK, то он появляется в списке и сообщает номер кода. Для устранения ошибок следует указать допустимый атрибут, когда он недопустимый, и заменить неверный код, когда снаружи возникает еррор.

Также можно сделать запрос к API по получению файла routes.xml и в частности посмотреть на блокировки типов страниц: Метод POST /callback: параметром callback может быть любой URL, на который будет отправлен сформированный файл. Библиотека XSL: вы можете загрузить последнюю версию из репозитория github.com/teamyandex/routers_beta.

Когда в табличных значениях появляется седая иконка, это означает, что скрипт не понял строку и нужна доработка логики. Если Вы не хотите тратить время на исправление, то отключите ненужные типы страниц и обойдитесь ограниченным списком. Это исключит вероятность неподтверждения проверки.

При указании адреса компьютера в переменной в шаблоне, не допускайте слишком длинный порт — он может затруднить индексацию со стороны Яндекс. Например, давайте адрес в виде доменного имени или изображения, следуя структуре шаблона.

Наконец, один из главных вопросов — индексация и внедрение результатов. Рекомендуется размещение карты сайта (sitemap.xml) в корневом каталоге, чтобы ускорить сканирование. Если Вы уже загрузили XML-файл ранее, то обязательно обновите его, потому что реиндексация может занять от нескольких часов до нескольких суток. Также выгибайте гугловскую заглушку напирая на ссылки, которые могут быть не вызовом фатальной ошибки.

Инструменты Яндекс.Вебмастера для диагностики

Панель Яндекс.Вебмастер предоставляет инструменты для сканирования источников и диагностики ошибок валидации. Функция проверки Турбо-страниц обнаруживает отличия от оригинальных страниц. Инструмент валидации микроразметки опровергает недопустимую разметку в JSON-LD и Microdata. Кроме этого, нередко проверяют robots.txt и XML-файлы через интерфейс Яндекс.Вебмастера. Все эти инструменты ускоряют исправление ошибок и поддерживают порядок на сайте.

Валидатор микроразметки

Валидатор микроразметки в Яндекс.Вебмастере — это инструмент для проверки корректности разметки страниц сайта. Он поддерживает все типы разметки Schema.org и microdata.

Чтобы воспользоваться валидатором, введите URL страницы или вставьте код разметки в соответствующее поле. Нажмите кнопку «Проверить» и получите результат.

В отчете будет указано, есть ли ошибки или предупреждения. Ошибки блокируют индексацию, предупреждения не критичны, но могут привести к снижению качества сниппета.

Для каждого элемента разметки будет указано, соответствует ли он требованиям Яндекса. Если нет, будет дано описание ошибки и рекомендация по исправлению.

После исправления ошибок повторите проверку, чтобы убедиться в корректности разметки.

Пример валидации разметки Product (Schema.org):

 { "@context": "https://schema.org", "@type": "Product", "name": "Товар", "description": "Описание товара", "image": "https://example.com/image.jpg", "price": 1999, "priceCurrency": "RUB" } 

Валидатор микроразметки поможет выявить и исправить ошибки, что улучшит качество сниппета и повысит вероятность отображения в результатах поиска.

Регулярно проверяйте разметку своих страниц, чтобы обеспечить корректность и актуальность информации.

Индексирование через Яндекс.Метрику

Счетчик Яндекс.Метрики служит источником данных для индексации. Когда посетитель открывает страницу с установленным кодом счетчика, Яндекс узнает о её существовании и добавляет в очередь сканирования.

Чтобы активировать обход по данным Метрики:

• Привяжите счетчик к сайту, подтвержденному в Яндекс.Вебмастере.
• В разделе «Индексирование» включите опцию «Обходить сайт по данным счетчика».

Этот метод ускоряет индексацию новых страниц. Например, если вы добавили товар на сайт и пользователь открыл его, робот посетит страницу через 2–12 часов, даже если она отсутствует в XML-карте или заблокирована в robots.txt.

Однако важно учитывать ограничения. Если страница содержит ошибки валидации (например, некорректную микроразметку), Яндекс может не проиндексировать её полностью. Регулярно проверяйте отчет «Проблемы сайта» и исправляйте найденные ошибки.

Для диагностики используйте API Яндекс.Вебмастера. Метод /v4/user/{user-id}/hosts/{host-id}/validation/issues покажет ошибки, связанные с индексацией через Метрику. Фильтруйте по типу metrika, чтобы увидеть только те, что возникли из-за данных счетчика.

Интеграция Метрики и Вебмастера снижает время между публикацией контента и его появлением в поиске. Это особенно важно для динамических сайтов, где контент обновляется часто, например, интернет-магазинов с ежедневными акциями.

Исправление ошибок: пошаговые действия

Шаг 1. Откройте “Проблемы сайта”, нажмите «Я исправил» после правки.
Шаг 2. Удалите дубли микроразметки: оставьте JSON-LD.
Шаг 3. Сверьте Турбо-страницы и главные: контент должен совпадать 1:1.
Шаг 4. Пропишите в robots.txt Allow: /feed/turbo/.
Шаг 5. Проверьте XML по схеме и отправьте повторно.

Подтверждение прав на сайт

Чтобы Яндекс открыл раздел «Инструменты» и давал сведения об ошибках валидации, вам нужно подтвердить, что именно вы владелец ресурса. Достаточно выбрать способ и выполнить два действия за четыре минуты.

Вариант 2 — DNS-запись. Скопируйте выданную TXT-строку у-образного формата и добавьте её в DNS вашего домена; Меняется не сразу: серверы Яндекса проверят обновление в течение 15 минут, максимум — 24 часа. Способ полезен, если нет доступа к файлам на хостинге.

После подтверждения можно активировать обход по счётчику Яндекс.Метрики. Привяжите счётчик к сайту и включите опцию «Проверять по данным счётчика». Тогда новые страницы индексируются быстрее: первое посещение бота происходит через 2–12 часов после просмотра пользователем.

Потерять права нельзя, даже если файл или DNS-запись удалить. Однако при переезде сервера перепроверьте подтверждение, чтобы не прерывать автоматическую диагностику проблем валидации.

Обновление источников Турбо-страниц

У Турбо-страниц есть два источника: веб-страница и фид-файл. Источники меняются автоматически, но иногда их следует обновлять вручную. Благодаря сравнению данных Турбо- или исходной страниц, за считанные минуты из(‘feed.feed-id.turbo.yandex.net‘) Яндекс фиксирует: дублирование микроразметки, несоответствие Турбо-страниц основным и окно рукотворного обновления.

Фид требует обновления, когда Яндекс существенно меняет правила обработки и совещается с партнёрами. Так как обновление происходит по требованиям Яндекса, уведомления об изменениях формата нет. Чтобы узнать, устарел ли файл, проверьте, обновил ваш партнёр инструмент сборщика фидов или нет.
Пример: метапрограмма свёрстанная по >=1.20.328 выпустит набор правил сборки для упрощения старых Турбо офисов в ‘feed.feed-id.turbo.yandex.net‘.

Поводы для обновления обеих источников:

• Турбо-страницы удалены.
• Обновление таблиц стилей или логотипа в шапке (оно используется в отображении лэйаута)
• Поменялся формат или прайс-листы (расширится за мгновение в Турбо-базе)
• Исчезновение блока
• Изменив свойства входной URL
• Инструкции, привязанные к Картам Турбо, Trengo-уведомлениям и другой интернет-транспортировке, сгенерируют ошибку відразу.

Если появилась ошибка обновления:

1. Обзор какой страницы сбитый: автоматически Яндекс покажет исходную (+ адрес carbx.io или ЦАТ, где оно сформировано и сколько минут считается).
2. Наведите указатель на ошибку, чтобы посмотреть, что выводит Яндекс и что не так. Исправьте.
3. Нажмите «Обновить».
4. Если на первых стадиях обновления даный не открывается, перезагрузите станицу — Турбо-соединение с сервером будет установлено.

Проверка после исправления

Нажмите «Я всё исправил» в разделе «Проблемы сайта». Робот посетит страницу в ближайшие 2–12 часов и снимет пометку об ошибке. Убедитесь, что проблема исчезла из отчёта: статус «ОК» появляеться автоматически.

Использование отчета «Индексирование»

В панели Яндекс.Вебмастер можно просмотреть подробный отчет по индексированию, который покажет данные о количестве проиндексированных и непроиндексированных страниц сайта. С помощью него вы также сможете диагностировать и исправлять ошибки валидации источников.

После того, как вы внесли изменения на сайте, рекомендуется использовать отчет «Индексирование» для проверки статуса URL. Онлайн-проверка может показать ошибки, такие как несоблюдение технических требований Яндекса, дублирование микроразметки или несоответствие Турбо-страниц. По результатам проверки система предложит рекомендации по устранению ошибок.

Другим важным отчетом является «Индексирование: содержание». Он показывает статус прохождения всех страниц сайта и maybe отмечает те, которые не были индексированы. Рассекреченное отображение информации в отчете может быть ограничено, поэтому для наиболее полного анализа лучше всего использовать может усечённую модальность. Кроме этого, с помощью этого отчета можно узнать, какие URL были отсканированы, но не добавлены в индекс, а также воспользоваться подробным анализом индексации по каждой странице сайта.

Обратите внимание, что проверка и исправление ошибок валидации источников должна выполняться регулярно, чтобы не допускать снижения качества индексирования сайта.

Регулярная диагностика ошибок валидации в Яндекс.Вебмастере — ключ к стабильной индексации и высоким позициям сайта. Используйте инструменты панели для автоматической проверки: отчет «Проблемы сайта», валидатор микроразметки и API помогут выявить и устранить ошибки до их влияния на трафик.

Подтверждение прав на сайт и настройка обхода через Яндекс.Метрику ускорят индексацию новых страниц. Проверяйте соответствие Турбо-страниц оригиналу: любое отличие, даже в цене или тексте, приведет к фатальной ошибке. Для фидов используйте актуальные схемы валидации и обновляйте источники при изменении контента.

После исправления ошибок нажимайте «Я исправил» в интерфейсе Яндекс.Вебмастера. Повторная проверка занимает 2–12 часов. Если проблема исчезнет, статус изменится на «ОК». Не игнорируйте предупреждения: даже незначительные ошибки снижают эффективность сниппетов и CTR.

Автоматизируйте процессы: настройте уведомления о новых ошибках и интегрируйте API для массовой диагностики. Это сократит время на исправления и минимизирует риски потери позиций. Регулярное обновление XML-карт, robots.txt и микроразметки — основа для стабильной работы сайта в поисковой системе.

FAQ: Вопрос-Ответ

Вопрос: Как быстро увидеть, что ошибка исправлена?

Ответ: Нажмите «Я исправил» в карточке проблемы. Робот откликается за 2–12 часов и убирает ошибку из отчёта. Можно узнать результат по зелёной иконке «ОК».

Вопрос: Где взять доступ к API Яндекс.Вебмастера?

Ответ: Зарегистрируйтесь в OAuth Яндекса, создайте приложение; Полученный токен вставьте в заголовок Authorization: OAuth token и вызовите метод GET /v4/hosts/{id}/validation/issues.

Вопрос: Почему дубли микроразметки считаются ошибкой?

Ответ: Когда на странице два формата (JSON-LD и Microdata), разметка у движка картины распадается на две конкурирующие версии. Удалите менее точный формат. Статус изменится с «critical» на «ОК» после следующего обхода.

Вопрос: Как проверить индексацию свежей страницы?

Ответ: Убедите, что счётчик Метрики привязан к сайту и включена опция «Обходить по данным счётчика». Откройте страницу самим или попросите друзей, робот посетит её через 30–120 минут, пропустит карту и robots.txt.

Вопрос: Нужен ли robots.txt право доступа к фиду?

Ответ: Да. Необходимо добавить строку Allow: /feed/turbo/. Без этой директивы бот получит 404 и фид не попадёт в индекс. Проверьте через валидатор robots.txt во «Вебмастере».