Кто занимается веб-разработкой и тем более SEO-продвижение сайтов, знает, во сколько раз ускоряется индексация сайта поисковыми системами, при наличии XML-карты сайта. Я подготовил небольшой обзор различных решений, с описанием их плюсов и минусов.
2428 просмотров
Sitemap XML особенно актуален, если сайт содержит несколько сотен или более страниц. Сайт объемом около 300-500 страниц, без карты сайта полностью индексируется в Яндексе за 3-4 недели, в то время как Sitemap.xml сокращает это время приблизительно до одной недели.
Это особенно актуально для интернет-магазинов и других проектов с широкой номенклатурой, сокращая время на возврат инвестиций, с момента публикации товара на площадке, до его появления в поисковой выдаче.
Если у Вас одностраничный лендинг, либо сайт объемом 5-10 страниц, то Вы не заметите существенной разницы, разве что, можете успокоить своего внутреннего перфекциониста.
Рассмотрим различные инструменты для получения XML-карты сайта.
Создать sitemap и добавить в вебмастер карту сайта
Web-сервисы для составления Sitemap XML карты сайта
Самое очевидное, что приходит в голову. Один из самых популярных, который можно найти в ТОПе результатов поиска: https://www.mysitemapgenerator.com/ru/, но, если поискать, можно найти еще десяток аналогичных.
Все просто: указали адрес сайта, подождали, получили результат, залили на сайт.
- Простота использования
- Часто имеют лимиты по числу страниц. Если сайт большой – придется заплатить.
- Иногда зависают и не отдают результат
- Результат чаще всего отправляется на e-mail. Как еще будет использоваться адрес Вашей почты – вопрос остается открытым.
- При обновлении необходимо перезаливать на хостинг вручную
Резюме: подходит для разового использования для небольших проектов
Модули для CMS для создания Sitemap XML карты сайта
Многие системы управления контентом (CMS) имеют собственные модули/плагины/компоненты для создания XML-карт сайта. Однако, не все они работают, как нужно.
Штатные инструменты для создания карты сайта у Bitrix, включает часто много мусорных страниц. У Joomla, некоторые расширения для создания карт сайта не индексируют страницы, генерируемые компонентами (JoomShopping, JoomGallery и т.д.), а это, часто, основной объем сайта.
- Карта сайта может автоматически обновляться по Cron-у или иному событию
- Инсталляция и настройка часто проходит через админку и не требует особых знаний, но так не всегда
- Могут быть проблемы совместимости расширений между собой, что будет мешать полной индексации
- В некоторых случаях, в карту сайта попадают «мусорные страницы»
- Загружая на свой сайт любой PHP-скрипт стороннего разработчика, стоит понимать риски, которые несет данное действие.
- Производительность ограничена лимитами Вашего хостинг-провайдера и при обработке большого сайта, возможно «падение» скрипта из-за нехватки ресурсов.
Резюме: подходит для некоторых проектов, выполненных на популярных CMS и имеющих подходящие расширения. Нужно рассматривать каждый случай индивидуально.
Gloomaps.com: обзор сервиса для создания карты сайта или визуализации структуры процесса
Скрипты для генерации Sitemap XML карты сайта
Существует так же множество скриптов, позволяющих генерировать карты сайта, написанных на различных языках программирования. Примером может служить бесплатный PHP-скрипт: http://enarion.net/tools/phpsitemapng/download/.
После установки, Вы можете назначить на скрипт запуск по Cron, для регулярного автоматического обновления карты, что весьма удобно.
- Карта сайта может автоматически обновляться по Cron-у
- Вы не указываете свою почту и другие данные, сохраняя конфиденциальность
- Нужны хотя бы начальные знания в web-разработке, чтобы настроить работу скрипта
- Возможна несовместимость с Вашим хостингом
- Загружая на свой сайт любой PHP-скрипт стороннего разработчика, стоит понимать риски, которые несет данное действие.
- Производительность ограничена лимитами Вашего хостинг-провайдера и при обработке большого сайта, возможно «падение» скрипта из-за нехватки ресурсов.
Резюме: подходит для многих сайтов, но требует начальной квалификации для установки и настройки.
Программы для создания Sitemap XML карты сайта
Среди десктопных программ, преобладают платные решения. Здесь я хочу выделить программу https://wonderwebware.com/sitemap-generator/, предыдущие поколения которой я использовал еще во времена Windows XP. Софт работает стабильно, шустро, не критичен к ресурсам ПК и ко всему этому бесплатен.
Указываете нужный сайт, ждете, заливаете результат на хостинг.
- Простота использования
- Вы не указываете свою почту и другие данные, сохраняя конфиденциальность
- Можно обрабатывать крупные проекты, не упираясь в лимиты хостинга
- При обновлении необходимо перезаливать на хостинг вручную
- Необходима установка на компьютер
Резюме: подходит для многих сайтов, но требует установки и ручного обновления
Сервисы хостинг-провайдеров для создания Sitemap XML карты сайта
Некоторые хостинг-провайдеры, расширяя свои сервисы, предлагают и бесплатное создание карты Вашего сайта. Например: https://beget.com/p64496/ru/hosting/virtual – позволяет своим клиентам бесплатно создавать карту сайта, буквально одним кликом.
Выбрали сайт, размещенный на их аккаунте, подождали, загрузили карту.
- Простота использования
- Вы не рискуете своими персональными данными
- Можно обрабатывать крупные проекты, не упираясь в лимиты хостинга (сборка карты сайта происходит в их облаке)
- Не требует установки на хостинг или компьютер
- Исключена несовместимость с хостингом или используемой CMS
- В случае возникновения вопросов, Вы всегда можете обратиться в техническую поддержку
- При обновлении необходимо перезаливать на хостинг вручную. Однако, возможно, в скором времени добавят и автоматическую перезапись.
Резюме: подходит для всех сайтов и не требует особых навыков.
А какими инструментами для создания карт сайта пользуетесь Вы?
Поделись в комментариях.
Источник: vc.ru
SiteMap Generator v0.972
SiteMap Genarator — бесплатная программа, которая сильно упрощает работу оптимизатору при работе с созданием карты сайта.
Совсем недавно наткнулся на эту замечательную, а главное функциональную и бесплатную программу. SiteMap Genarator умеет все:
1. Создание карты сайта:
— возможно выбрать главную страницу;
— исключение не нужных страниц в карте;
— возможность создание карты только для определенных страниц сатй
2. Создает карты в нескольких вариантах:
— Google SiteMap|XML;
— YahooMap|Text;
— Html карта;
— CSV
3. Просмотр корневого файла robots.txt
4. Показывает неверные или не правильные урлы на сайте.
5. Работа в несколько потоков (здесь надо быть осторожней, ваш хостер может заблокировать ваш апи при большом пакете запросов к сайту)
6. и многое другое.
Хоть интерфейс программы на английском языке понять что и где не составит труда.
Самое первое надо ввести урл вашего сайта.
Второе, указываем количество соединений с сайтом, при сборе страниц, и в первой колонке указываем начальную страницу (это если она у вас не стандартная index.php, а другая, типа myhome.php и другое), во второй вкладке прописываем страницы для исключения из карты, например:
*seo/* — исключит все страницы из раздела seo
*seo* — исключит все страницы где встречается искомое слово
и третья вкладка — аналогично второй, но на оборот
*seo/* — включить только страницы в разделе seo
*seo/* — включить все страницы в карту сайта где встречается искомое слово
после всех манипуляций жмем кнопку «start» и в режиме реального времени наблюдаем за результатом программы.
В конце мы получим карту сайта в нескольких вариантах, выбираем какой именно нам нужно и используем по назначению.
Версия: 0.972
Дата выхода: май 2012
Тип: бесплатная
Статус: обновляется
Разработчик: Melanto
И как всегда напоминаю в прошлом посте щупали программу ZeroDomains 1.01 — массовая проверка доменов на занятость.
Понравилось? Поделись ссылкой:
- Вернуться к списку
- Просмотрено: 64268
Источник: seo-ng.net
Как создать и настроить карту сайта sitemap.xml в 2021 году
Дмитрий Дементий Редакция «Текстерры»
Обновил Сергей Алмакин
Даже в 2021 году XML-карта нужна: этот инструмент по-прежнему используется краулерами Google и «Яндекс» – для ускорения индексации и получения технической информации о страницах. Из этой статьи вы узнаете, что такое sitemap.xml, зачем нужна XML-карта сайта, как ее создать и настроить правильно.
Оглавление:
Оглавление:
Что такое карта сайта, и зачем она нужна
В этом руководстве будем говорить преимущественно о картах сайта для поисковых систем. Это XML-документы, которые содержат служебную информацию. Они помогают поисковым роботам ориентироваться на сайтах и эффективно их индексировать.
Пример автоматической карты сайта, сгенерированной плагином Google (XML) Sitemaps Generator для CMS WordPress
Также существуют карты сайта для живых посетителей. Их еще называют HTML-картами. Они представляют собой каталог страниц сайта с отображением иерархии. HTML-карта помогает посетителям путешествовать по сайту и искать нужные страницы.
HTML-карты – устаревший и не очень удобный элемент навигации, поэтому уделим им немного внимания в конце статьи. А пока сосредоточимся на XML-картах, которые важны для корректной индексации ресурсов.
Зачем нужна карта сайтаsitemap.xml
Подробно об этом можно прочитать в справочниках от Google и «Яндекса». Краткая суть: в sitemap.xml содержится важная для поисковых роботов информация. Это:
- Список URL страниц сайта и их иерархия.
- Тип опубликованного контента, например, изображения или видео.
- Информация об изображениях и видео, которые поисковики используют для индексирования сайта и формирования выдачи.
- Сведения о частоте обновления и последнем обновлении страницы.
- Сведения о приоритетности страницы.
- Данные об альтернативных версиях страницы.
Те есть карта сайта – навигатор для поисковых систем.
Можно ли обойтись без sitemap.xml
Можно. Поисковые системы считают XML-карту сайта рекомендованным инструментом. Например, если на сайте нет sitemap.xml, «Яндекс» отметит это в списке возможных, а не критичных или фатальных проблем.
Отсутствие sitemap.xml относится к «возможным» проблемам сайта, но такая проблема не является фатальной или критичной
Роботы – не дураки, они проиндексируют сайт и без sitemap.xml. Но в некоторых ситуациях отсутствие XML-карты приводит к проблемам с индексированием. Вот примеры:
- На сайте есть страницы, на которые нет ссылок с других страниц сайта.
- Сайт очень большой, у него сложная структура.
- Новый сайт.
- Многие страницы сайта регулярно обновляются.
- На сайте есть более и менее важные страницы.
Рекомендация: если у вас коммерческий сайт, от посещаемости которого зависит успех бизнеса, создайте и подключите sitemap.xml. Ниже подробно описано, как это сделать.
Продвинем ваш бизнес
В Google и «Яндексе», соцсетях, рассылках, на видеоплатформах, у блогеров
Как создать и подключить файл sitemap.xml
Создать карту сайта можно двумя способами. Первый – сделать sitemap.xml можно с помощью внешнего онлайн-генератора. Второй – понадобится модуль или внутренний генератор для конкретной CMS. Рассмотрим оба способа.
Как создать карту сайта онлайн с помощью генератора
Этот способ хорош тем, что вы не привязываетесь к конкретному движку. С помощью онлайн-генераторов можно сделать sitemap.xml для сайта на любой CMS или для статичного сайта на HTML.
У этого способа есть недостаток. Он подходит для сайтов с ограниченным количеством страниц, например, для сайтов-визиток. Если на сайте пять страниц, а новые создавать вы не планируете, сделайте sitemap.xml один раз с помощью бесплатного внешнего сервиса. Примеры будут дальше.
Если на сайте постоянно появляются новые страницы, бесплатные внешние генераторы не подходят. Они не включают в карту сайта новые URL, поэтому sitemap.xml теряет актуальность.
Вот несколько генераторов карты сайта:
Чтобы создать sitemap.xml с помощью XML-Sitemaps, укажите URL сайта и нажмите кнопку Start.
Создаем карту сайта
В зависимости от масштабов сайта и суммарного количества страниц придется подождать. От нескольких секунд до нескольких минут:
В нашем случае сканирование сайта с 541 страницей в поиске «Яндекса» заняло около 4 минут. После того, как карта будет сформирована, скачайте файл sitemap.xml на жесткий диск. Для этого нажмите кнопку VIEW SITEMAP DETAILS:
Откроется подробная детализация созданной карты. Можете ознакомиться с ней и затем нажать DOWNLOAD YOU XML SITEMAP FILE:
Загружаем созданный файл на жесткий диск
Теперь загрузите sitemap.xml в корневую директорию на сайте. Это можно сделать с помощью FTP-клиента, например, FileZilla. У нас есть руководство по работе с этой программой. Еще легче – при помощи файлового менеджера используемого вами хостинга. Например, вот файловый менеджер хостинга Beget:
Если не знаете, где находится корневой каталог сайта, найдите файл index.html или index.php:
Как создать карту сайта с помощью дополнительных модулей для CMS
Этот способ создания карты сайта более удобный по сравнению с бесплатными онлайн-генераторами. Он обеспечивает дополнительную гибкость: вебмастер может управлять параметрами sitemap.xml. Кроме того, надстройки автоматически обновляют карту сайта после создания новых страниц и уведомляют об этом поисковые системы.
Если ваш сайт работает на WordPress, обратите внимание на плагин Google XML Sitemaps. Установите и активируйте модуль. Перейдите на страницу настроек. В базовых параметрах включите уведомления для Google, добавьте URL карты сайта в robots.txt и включите сжатие файла sitemap.xml:
Обязательно отметьте эти четыре чекбокса
В разделе «Приоритет статьи» отключите автоматический расчет приоритета публикаций. Позже вы укажете приоритеты страниц вручную.
Уделите внимание разделу «Содержание карты сайта». Включите в sitemap.xml только те типы страниц, которые нужны вам в индексе поисковых систем.
Например, если у вас интернет-магазин, имеет смысл включить в карту сайта страницы категорий и меток. В этом случае поисковики будут показывать пользователям страницы каталога, например, рубрику «Смартфоны» или страницу каталога с товарами, помеченными тегом «детский». Если страницы меток и категорий в выдаче не нужны, не включайте их в карту сайта.
Обязательно отметьте галочкой опцию Include the last modification time. В этом случае плагин укажет в карте сайта дату последнего обновления публикации. Эта информация нужна роботам, чтобы планировать повторное сканирование страниц.
Отмечаем четыре чекбокса на главной странице настроек плагина
В разделе Excluded Items при необходимости исключите из карты сайта отдельные категории или страницы.
В разделе Change Frequencies можно попросить поисковые системы индексировать те или иные типы страниц с определенной периодичностью. Поисковики, скорее всего, проигнорируют параметр changefreq в sitemap.xml, так как они сами планируют краулинговый бюджет сайта. Тем не менее, плагин дает возможность указать эти настройки в карте сайта.
Указываем желаемую частоту индексирования страниц
В разделе «Приоритеты» укажите приоритетность страниц сайта. Допустимы значения от 0,1 до 1,0. По умолчанию страница имеет приоритет 0,5. Присвойте высокий приоритет страницам, которые считаете важными по сравнению с остальными страницами сайта. Например, если на главной появляются анонсы новостей или новых товаров, она может считаться самой приоритетной страницей.
Указываем приоритеты индексации
Обратите внимание: время последнего обновления, желаемая частота индексации и приоритетность страниц – необязательная информация. Поисковые системы могут ее учитывать, а могут и не учитывать. Вы ничего не потеряете, если оставите в этих разделах дефолтные значения.
Сохраните изменения. После этого о плагине Google XML Sitemaps можно навсегда забыть, так как он работает в фоновом режиме, автоматически обновляется и сам актуализирует карту сайта. Вам останется только добавить sitemap.xml в Google Search Console и «Яндекс.Вебмастер».
Google XML Sitemaps – не единственный плагин для WordPress, с помощью которого можно создать карту сайта. Например, в комбайне All in One SEO есть модуль «Sitemaps»:
После активации модуля можно создать карту сайта и настроить ее параметры:
Активируем чекбокс Enable Sitemap
Если вы публикуете на сайте видео и хотите, чтобы они ранжировались в поиске, то в этом же плагине можно создать карту сайта для видео:
Кроме этого, для создания отдельной карты сайты для видео можно воспользоваться специально предназначенным для этого генератором, например, Sitemap Generator.
Вот генераторы sitemap.xml для других движков:
- Для «Джумлы»: JSitemap.
- Для Drupal: Simple XML sitemap.
- Для OpenCart: FS XML Sitemap Free — sitemap.xml file generator.
После создания карты сайта добавьте ее в Google Search Console и «Яндекс.Вебмастер».
Как добавить карту сайта в Google Search Console и «Яндекс.Вебмастер»
Чтобы добавить карту сайта в Search Console, выберите раздел «Файлы Sitemap». Добавьте URL карты и нажмите кнопку «Отправить». Обычно карта сайта доступна по адресу типа vash-site.ru/sitemap.xml.
Добавляем sitemap.xml в Search Console
Поисковику понадобится какое-то время, чтобы проиндексировать карту сайта. После индексации появится статус «Успешно» или сообщение об ошибках. Чтобы просмотреть отчет об индексировании карты сайта в новом интерфейсе Search Console, нажмите на отмеченную на иллюстрации пиктограмму.
Смотрим отчет об индексировании sitemap.xml
В отчете можно увидеть данные об индексировании sitemap.xml. Например, если на сайте есть закрытые от индексирования страницы, уведомление об этом появится в отчете.
Если на сайте есть проблемы с индексированием, отчет о карте сайта это покажет
Чтобы добавить sitemap.xml в «Яндекс.Вебмастер», выберите раздел «Индексирование – Файлы Sitemap»:
Укажите URL карты сайта в соответствующем поле и нажмите кнопку «Добавить».
Добавляем карту сайта в «Яндекс.Вебмастере»
В «Яндекс.Вебмастере» уведомление о проблемах с картой сайта появляется в разделе «Диагностика сайта». Также корректность файла можно проверить с помощью специального инструмента.
С sitemap.xml все в порядке
«Яндекс.Вебмастер» или Search Console Google: какая панель все же лучше (и для каких задач)
Как создать HTML-карту сайта
Как отмечалось выше, HTML-карта – элемент навигации для живых пользователей. Если у сайта логичная структура и удобное меню, HTML-карта не нужна. Если сайт большой, а пользователи жалуются на запутанность структуры, попробуйте решить проблему с помощью карты сайта.
Когда искал пример HTML-карты сайта, почему-то сразу подумал про сайты государственных пенсионных фондов. И не ошибся. Видимо, пожилым пользователям сложно ориентироваться на сайте с помощью меню. Учитывайте это, когда будете решать целесообразность добавления карты сайта в формате HTML.
Карта сайта пенсионного фонда РБ
Создать карту сайта в формате HTML на WordPress можно с помощью плагина Simple Sitemap от разработчика David Gwyer или аналогичных решений. Достаточно установить и активировать надстройку, а затем вставить предложенный шорткод на страницу, где нужна >карта сайта.
Карта сайта готова
Вот решения для других CMS:
- OSMap для Joomla.
- Sitemap для Drupal.
В OpenCart карта сайта в формате HTML создается автоматически.
Карта сайта: создать и забыть
Именно так выглядит идеальный алгоритм работы с картой сайта sitemap.xml. Чтобы его реализовать, лучше пользоваться плагинами и модулями для CMS. Они автоматически генерируют файл sitemap.xml и актуализируют его при появлении на сайте новых страниц.
Созданную карту сайта нужно добавить в Search Console и «Яндекс.Вебмастер». После этого о sitemap.xml действительно можно забыть. Если у поисковых систем возникнут проблемы с индексированием карты, они вас уведомят. Чтобы решить проблемы, скорее всего, будет достаточно повторно сгенерировать карту и отправить ее на индексацию.
Источник: texterra.ru