Альтернативная карта сайта или технология Sitemaps
Во многих статьях, описывающих
эффективные методы индексации сайта, не раз говорилось, что путь к сердцу любой
поисковой системы – это карты сайта.
И это действительно верно, т. к. основной принцип нахождения новых страниц
поисковыми системами – это переход по ссылкам, опубликованным
на странице. Так происходило раньше, да и что скрывать, сейчас этот метод не
утратил своей значимости даже в виду внедрения новых более эффективных методов
сбора новых ссылок.
Сколько себя помнит Интернет, веб-мастеры всегда пытались угодить поисковым
паукам - помочь им собрать детальную информацию о структуре развиваемого ими
сайта.
Первым, самым древним и вполне естественным способом, было
создание специальной страницы, на которой помещались все ссылки сайта.
Назывались и называются такие страницы картой сайта. Принцип
работы прост: поисковый робот при визите на эту страницу автоматически пройдёт
по опубликованным там ссылкам и занесёт их в индекс.
Подобная схема была удобна раньше, но сейчас, когда сайты перестали собой
представлять исключительно статические страницы, возникла новая проблема,
связанная с неэффективностью метода публикации классического варианта карты
сайта, т. к. мест для ссылок не хватает, страницы получаются
большими по размеру, неудобными в
эксплуатации, как человеку, так и машине.
На некоторых сайтах число страниц перевалило за 1
000, поэтому абсолютно все ссылки разместить на карте сайта стало
невозможно. Коэффициент проиндексированности таких сайтов стал снижаться.
И проблема была решена. В июне 2005 года компанией
Google был создан новый удобный формат описания страниц сайта
для улучшения качества их индексации поисковыми системами.
Стандарт получил название Sitemaps 0.84. За основу был
принят принцип текстовой базы данных XML, позволяющий компактно в текстовом
файле описать структуру сайта, включая новые и опубликованные ранее страницы с
возможностью указания дополнительной мета-информации. Эффективное решение
Sitemaps, предложенное Google, стало пользоваться бешеной
популярностью.
Популярность сказалась и на мнении других поисковых систем к новому подходу
создания карт сайта. Так в ноябре 2006 года к поддержке
стандарта присоединились такие поисковые гиганты, как MSN и
Yahoo, а в апреле - и Ask.com. На
радостях формат Sitemaps получил новую версию Sitemap 0.90,
расширяющую функциональные возможности.
В мае 2007 года было официально объявлено о возможности
подключения файла в стандарте Sitemap в файле robots.txt
поисковиками Ask, Google и
Yahoo, т. е. найти карту сайта Sitemap стало проще: достаточно
указать его местоположение в этом файле, а за источник информации для Sitemap
использовать RSS-ленты или обычные текстовые
файлы.
С июня 2008 года поисковая система "Яндекс"
также стала поддерживать технологию Sitemaps.
Особенности карты сайта по технологии Sitemap:
Технология Sitemap, как и было сказано выше, реализуется при
помощи текстовых баз данных XML, позволяющих компактно хранить данные в удобном
для человека и программы виде. Сам файл XML именуется
sitemap.xml, корректно также и создание сжатого gzip файла
(sitemap.xml.gz).
Стандартом Sitemap предусмотрены следующие возможности и
ограничения:
- один xml-файл может содержать в себе не больше 50 000
адресов и быть объёмом не больше 10 мегабайт; - в
случае, если ваш сайт содержит более 50 000 страниц, а объём самого файла
превышает 10 мегабайт, можно воспользоваться возможностью подключениея
нескольких файлов sitemap.xml. В этом случае один файл делается
индексным, описывающим все адреса к остальным файлам
sitemap. - Стандартом предусмотрена вложенность: в каждой
директории может быть свой sitemap.xml, описывающий файлы в директории и в
поддиректориях. Ссылок на директории, выше существующей, а также на посторонние
домены (в этом списке и поддомены основного домена) быть не должно. - Сам
xml-файл должен быть в международной кодировке UTF-8. - Все
специальные XML-символы, если они не используются по назначению
(т. е. не части тегов и параметров), должны быть закодированы (выполните
маскирование). Это относится к амперсанду (&), одинарной кавычке ('),
двойной кавычке ("), знак "меньше" (<) и знак "больше" (>). - Все
адреса и пути должны быть полными, включая префикс http://
Sitemap работает на основе технологии XML, поэтому в начале
каждого сайта по традиции составляется xml-пролог:
<?xml version="1.0" encoding="UTF-8"?> Указывающий версию
xml и кодировку документа
Затем идёт ряд обязательных тегов: <urlset>
используется для указания начала и конца информации с данными о
страницах, описанных в файле Sitemap (используя вложенные в
него теги <url>), а также несёт дополнительную информацию обработчику
(поисковой системе) через параметр xmlns, с каким стандартом он имеет дело и в
случае чего URL, который описывает особенности определённого стандарта (схемы
стандарта). <url> - контейнер, содержащий информацию
об определённой странице сайта. <loc> - тег адреса
описываемого документа, здесь мы пишем URL страницы.
В контейнер <url> также входит ряд необязательных
тегов: <lastmod> - дата последней модификации
документа, используется формат год-месяц-число. Все данные в числовой форме.
(Используйте этот тег с умом: не пишите здесь ложные значения, т. к. это
приведёт лишь к излишней нагрузке на сервер) <changefreq>
- частота обновления страницы со следующими значениями:
always, Hourly, daily, weekly, monthly, yearly,
never. <priority> - приоритет страницы над
другими страницами сайта, т. е. ваше мнение об её важности относительно других
страниц вашего сайта. Используется числовой формат из диапазона 0,0 – 1,0.
Важно помнить, что необязательные теги никак не влияют на
ранжирование информации в Интернете. Эти данные всего лишь помогают
определить субъективное авторское мнение о проекте.
Здесь всё по аналогии: <sitemapindex> выполняет схожие
функции, что и < urlset >. Основное отличие этого тега в том, что он
описывает ссылки на sitemap-документы, а не на ссылки, как в случае с
< urlset >. <sitemap> описывает
ссылку на другой файл sitemap. <lastmod> указывает на
время последнего обновления файла sitemap.
Как сказать поисковой системе о моей карте сайта Sitemap?
1) В поисковой системе Google в центре веб-мастеров указать
URL вашего файла Sitemap, в поисковой системе "Яндекс" -
в разделе "Мои сайты" 2) Поместить сам файл в
корневую директорию, дав ему имя sitemap.xml или
sitemap.gz 3) Опубликовать в файле robots.txt информацию о
вашей карте сайта. (Как это сделать, читайте здесь: [1] http://dataword.info/robots.php)
Как создать карту сайта Sitemap?
1) Вручную написать синтаксис: очень неудобно, зато надёжно.
Вы всегда будете в курсе дела. 2) Использовать специальные
онлайн-сервисы генерации файлов Sitemap: Например, можно это
сделать здесь: [2] http://www.sitemapspal.com/ 3) Использовать
CMS, которая это будет делать автоматически. Например, на CMS
Wordpress можно подключить плагин, который будет автоматически генерировать
карту сайта, сжимать её, сохранять на диске и отправлять в
Google.
Знаете ли Вы, что, как и всякая идолопоклонническая религия, релятивизм ложен в своей основе. Он противоречит фактам. Среди них такие:
1. Электромагнитная волна (в религиозной терминологии релятивизма - "свет") имеет строго постоянную скорость 300 тыс.км/с, абсурдно не отсчитываемую ни от чего. Реально ЭМ-волны имеют разную скорость в веществе (например, ~200 тыс км/с в стекле и ~3 млн. км/с в поверхностных слоях металлов, разную скорость в эфире (см. статью "Температура эфира и красные смещения"), разную скорость для разных частот (см. статью "О скорости ЭМ-волн")
2. В релятивизме "свет" есть мифическое явление само по себе, а не физическая волна, являющаяся волнением определенной физической среды. Релятивистский "свет" - это волнение ничего в ничем. У него нет среды-носителя колебаний.
3. В релятивизме возможны манипуляции со временем (замедление), поэтому там нарушаются основополагающие для любой науки принцип причинности и принцип строгой логичности. В релятивизме при скорости света время останавливается (поэтому в нем абсурдно говорить о частоте фотона). В релятивизме возможны такие насилия над разумом, как утверждение о взаимном превышении возраста близнецов, движущихся с субсветовой скоростью, и прочие издевательства над логикой, присущие любой религии.
4. В гравитационном релятивизме (ОТО) вопреки наблюдаемым фактам утверждается об угловом отклонении ЭМ-волн в пустом пространстве под действием гравитации. Однако астрономам известно, что свет от затменных двойных звезд не подвержен такому отклонению, а те "подтверждающие теорию Эйнштейна факты", которые якобы наблюдались А. Эддингтоном в 1919 году в отношении Солнца, являются фальсификацией. Подробнее читайте в FAQ по эфирной физике.
