XML Sitemap: рекомендации и советы по оптимизации

1. Функции и преимущества
2. Важен ли XML Sitemap?
3. Требования и форматы
4. Определите важные страницы
5. Индексированные страницы открыты
6. Канонические версии страниц
7. Страницы, которые возвращают 200 OK
8. Страницы страниц
9. Минимизировать размер файла
10. Что такое индексный файл Sitemap
11. Опишите мобильную версию
12. Как боты находят ваш сайт
13. Правильная адресная транслитерация
14. Отправьте свою карту в Google
15. заключение

Sitemap.xml на вашем сайте может служить хорошей навигацией для страниц, которые вы хотите проиндексировать ботом Google. Это помогает быстрее находить основные страницы, даже если у вас нет хорошего внутреннего проникновения. В этой статье мы представим различные рекомендации по оптимизации файлов Sitemap для XML и почему мы должны это делать.

Функции и преимущества

Сделайте так, чтобы боты работали проще, и включите «отчеты» о страницах и ссылках на вашем сайте, которые не всегда легко найти.

Мы можем учитывать следующие преимущества SEO, в том числе:

• более быстрая индексация - поисковые системы узнают о новых страницах намного быстрее, поэтому процесс индексации и отображения сайта в результатах поиска будет быстрее. Странно то, что он также может помочь с деинтерлейсингом (больше информации здесь )
• улучшенная индексация внутренних страниц - поисковые системы могут находить страницы, которые не обнаруживаются при сканировании веб-сайта. Но это не обязательно означает, что все они будут проиндексированы.
• мониторинг проиндексированных страниц. В сочетании с консолью поиска Google можно узнать, какие URL-адреса включены в XML-файл Sitemap, который индексирует Google.

Важен ли XML Sitemap?

Это важно для сайтов, которые:

• не имеют хорошей структуры или хорошей взаимосвязи;

• иметь много страниц - XMLsitemap помогает поисковым системам находить новые или обновленные страницы;

• они не имеют много входящих ссылок - это отличный способ найти ваши страницы.

Требования и форматы

Google поддерживает несколько форматов Sitemap. Все форматы и стандарты можно найти по этому адресу: https://www.sitemaps.org/index.html ,

Все форматы ограничивают карту до 50 МБ (без сжатия) и до 50 000 адресов. Если у вас есть файл большего размера или несколько адресов, вам нужно будет создать индексный файл со всеми картами (описано ниже в статье).

Основные рекомендации:

• сам файл должен быть закодирован с помощью UTF-8;
• начинается с открывающего тега и должен заканчиваться закрывающим тегом, например < urlset > .... </ urlset >;
• укажите стандартный протокол в теге < urlset >.
• главный тег для каждой записи URL < url >;
• Укажите URL-адрес при запуске с протоколом (например, https или http) в теге < loc >, и он должен быть частью основной метки записи.

Есть дополнительные атрибуты, которые являются необязательными. В настоящее время вам следует помнить, что Google не использует атрибут <priority> на ваших сайтах. Все остальные видят их, но будет ли они отражаться снова, зависит. Так что имейте в виду, что Google не воспринимает эти теги всерьез. Это:

• < lastmod > - представляет дату последней модификации файла. Должно быть в формате W3C Datetime ;
• < changefreq > - как часто страница будет обновляться. Это значение предоставляет общую информацию поисковой системы. Допустимые значения: всегда, ежечасно, ежедневно, еженедельно, ежемесячно, ежегодно, никогда. Следует иметь в виду, что значение этого тега является скорее подсказкой, чем командой. Роботы видят эту информацию и учитывают ее, но в конечном итоге решают, использовать ли ее в зависимости от многих других факторов.
• < приоритет> - устанавливает приоритет URL-адреса над другими URL-адресами на вашем сайте. Допустимые значения варьируются от 0,0. до 1,0. Здесь также следует иметь в виду, что этот приоритет является относительным и не обязательно является условием для роботов или, по крайней мере, еще не принят в качестве такового. Однако, если вы решите попробовать, используйте следующее руководство:
• 0.0 - 0.3: устаревшие новости, информация, которая больше не действительна, но исторически полезна;
• 0,4 - 0,7: статьи блога, категории страниц, часто задаваемые вопросы;
• 0,8 - 1,0: домашняя страница, страницы продукта, все страницы с хорошим оптимизированным контентом.

В следующем примере показан файл Sitemap, который содержит только один URL-адрес и использует все необязательные теги, написанные курсивом.

Определите важные страницы

Добавьте страницы высокого качества и те, которые хорошо оптимизированы. Для лучшего рейтинга большое значение имеет общее качество. Это серьезный фактор для Google, который может дать вам серьезное конкурентное преимущество.

Я не хочу посещать страницы низкого качества, бот Google также. Если вы нацелите его на тысячи страниц, которые не удобны для пользователя и не оптимизированы, это может сделать вас плохой шуткой. Какие страницы высокого качества? Проще говоря, это страницы, которые:

• иметь достаточно уникального контента;
• быстро вовлекать своих пользователей, подталкивая к действию (комментарии, отзывы и т. д.);
• включать изображения, видео и т.д .;
• Не нарушайте политику Google.

Индексированные страницы открыты

Обход бюджета - это, как правило, количество страниц, просканированных за единицу времени (день, неделя, месяц и т. Д.). Поэтому не стоит тратить его без необходимости. Страницы сайта, содержащие тег «Noindex», добавлять нельзя. Важно иметь последовательность действий и быть логичным.

Необходимо автоматически проверять и не включать адреса, закрытые для индексации.

Рекомендуется следовать следующим инструкциям:

• если на странице https://example.com/category/product есть тег «noindex», его не следует включать в карту XML сайта.

• если страница закрыта для индексации через robots.txt, ее не следует снова включать в карту XML:

Disallow: / категория / продукт
Noindex: / категория / продукт

• если страница закрыта для индексации через X-Robots-Tag в заголовке HTTP, она также не должна быть включена в карту XML сайта:

HTTP / 1.1 200 OK
Дата: вторник, 25 мая 2010 г. 21:42:43 GMT
(...)
X-Robots-Tag: noindex
(...)

Канонические версии страниц

Доступ к одной странице через несколько URL-адресов со схожим содержанием будет рассматриваться Google как дублированный. Вы должны использовать атрибут rel rel canonical, чтобы сообщить боту, какая страница является «главной», а какую следует сканировать и индексировать.

Например, если https://example.com/category/product-1 является каноническим для https://example.com/product, http://example.com/category/product-1 не должен участвовать в XML карта сайта.

Автоматическая проверка должна быть выполнена, потому что автоматизированный процесс приведет к уменьшению головной боли и сэкономит время для ручных проверок.

Страницы, которые возвращают 200 OK

Включите адреса, которые возвращают 200 OK. Важно автоматически проверять и не включать адреса, которые возвращают ответ, отличный от 200 OK - например, 404, 301 и т. Д.

Например, если https://example.com/product возвращает ответ, отличный от 200 OK, он не должен участвовать в карте сайта.

Вы можете использовать следующий инструмент: https://soft.galinov.com/ проверить.

Страницы страниц

Вам не нужно включать абсолютно все страницы в sitemap.xml. Бот достаточно умен, чтобы иметь возможность перемещаться с первой страницы категории, если он правильно описан. Желательно включать только:

• Главные страницы категорий;
• Пометьте страницы с помощью rel = next / rel = prev, чтобы робот мог видеть связь между ними;
• Каждая страница страницы также может быть канонической для вас, а не для основной, потому что, если вы говорите обратное, вы говорите: «Не имеет значения, что у меня 5000 товаров и 20 страниц, они такие же, как и первая».

Например, https://example.com/category/page-2 не обязательно должен быть на карте. Мы также разделяем официальное заявление Google и их рекомендации:

Минимизировать размер файла

В 2016 году Google и Bing увеличили размер файлов с 10 МБ до 50 МБ, но по-прежнему рекомендуется сохранять как можно меньший размер файла Sitemap.

Конечно, это не должно беспокоить вас, но если ваша карта сайта содержит более 50000 URL-адресов или ее размер превышает 50 МБ, ее следует разбить на несколько карт XML. В этом случае ссылки на все XML-карты описаны в отдельной индексный файл карты сайта ,

Что такое индексный файл Sitemap

Вы можете предоставить несколько файлов Sitemap, но каждый файл должен соответствовать приведенным выше правилам. Если вы хотите, вы можете сжать файлы с помощью gzip, чтобы уменьшить требования.

Формат XML-файла индексного файла очень похож на обычный формат файла Sitemap. Он должен содержать:

• тег открывать и закрывать как <sitemapindex> </ sitemapindex>;
• включите запись для каждого файла Sitemap, поскольку основным атрибутом XML является <sitemap>;
• включите тег <loc> в основной атрибут <sitemap>.

Рекомендуемый атрибут <lastmod> также включен.

Примечание . Индексный файл Sitemap может указывать только карты, которые находятся на одном сайте. Например:

https://example.com/sitemap_index.xml может включать карты на https://example.com, но не https://www.saitprimer.com или https://www.example.com.

Как и все остальные, индексный файл должен быть закодирован с использованием UTF-8.

В следующем примере показан индекс Sitemap, в котором перечислены две карты:

Опишите мобильную версию

Мы должны помочь роботу Google обнаружить наш контент и понять связь между настольными и мобильными страницами. Атрибут rel = "alternate" для страниц рабочего стола должен быть добавлен в карту сайта XML следующим образом:

Следует иметь в виду, что каждая страница рабочего стола должна соответствовать одной странице мобильной версии. Например, не рекомендуется, чтобы несколько страниц рабочего стола были связаны через rel = "alternate" с одной страницей мобильной версии и наоборот.

Также проверьте перенаправления. Потому что важно, чтобы страница рабочего стола соответствовала тому же контенту в мобильной версии, а не перенаправляла на другую. Дополнительная информация здесь ,

Как боты находят ваш сайт

Когда вы завершили всю автоматизацию процесса и загрузили ее на свой сервер (или сгенерировали с помощью плагина), вам нужно указать, где они могут его найти.

Лучше всего включить ссылку на него в ваш файл robots.txt. Это также называется Sitemap Discovery, и это то, что Google, Bing и Yahoo представили в 2007 году, чтобы помочь своим роботам находить XML Sitemaps.

Просто укажите полный путь к вашей карте или индексному файлу.

Правильная адресная транслитерация

В официальной документации Google ( Создайте и отправьте файл Sitemap ) подчеркивает, что все значения данных (включая URL) должны содержать только символы ASCII. Он не может содержать управляющие коды или специальные символы, такие как * или {}. Если URL вашего сайта содержит эти символы, вы получите сообщение об ошибке при попытке добавить его.

Отправьте свою карту в Google

Вы можете отправить карту своего сайта в Google с Google Search Console ,

Проверьте на наличие ошибок перед отправкой. Важно устранить эти ошибки, которые могут стать препятствием для индексации ключевых целевых страниц.

В лучшем случае количество проиндексированных страниц должно быть таким же, как количество отправленных страниц.

заключение

1. Будьте последовательны - если страница robots.txt заблокирована или noindex, лучше не в вашей XML-карте.
2. Автоматизируйте ваш процесс - все вышеперечисленные рекомендации должны быть автоматизированы, поскольку это сэкономит ваше время, поможет оптимизировать бюджет сканирования и избавит вас от множества головных болей.
3. Если у вас очень большой сайт, используйте другой карточный индекс, чтобы сэкономить время сервера и охватить все важные страницы вашего сайта.

Похожие

Комментарии