VPF::Google Sitemap - Форум программистов

ST_Falcon

Дата 26.11.2006, 16:07 (ссылка)

(голосов:1)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 330
Регистрация: 14.11.2003
Где: Львов

Репутация: нет
Всего: 1

1. зачем он нужен?
- для того чтобы Гугль знал примерную структура вашего сайта. это положительно сказывается на индексации и на выдаче.

2. как сделать?

Цитата

Для хорошей индексации сайта в Google от вебмастера требуется предоставить своего рода карту сайта в файле sitemap.xml. Кроме автоматического информирования о своих URL можно (и желательно) указать для каждого URL степень важности страницы (приоритет), дату последнего обновления и предполагаемую частоту обновления.
Вебмастер получает гораздо лучшую индексацию своего сайта и ! подробные отчеты о том, как Google направляет трафик на Ваш сайт и как робот Google видит Ваши страницы (полезные отчеты кстати). Такие отчеты, как например, статистика запросов, статистика сканирования, анализ страниц, статистика индекса и др. Т.е. неплохой инструмент для продвижения сайта.
Поместив файл sitemap.xml в корневую директорию сайта, достаточно кликнуть (находясь в своей учетной записи Google) "добавить sitemap".
Ничего не мешает использовать такую карту сайта и другим поисковым системам. Не знаю, используют ли другие поисковики файл sitemap.xml для Google в своих интересах, но если б я был другой поисковой системой, то обязззательно использовал бы.
Протокол файла достаточно простой:
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.google.com/schemas/sitemap/0.84">
<url>
  <loc>http://www.example.com/</loc>
   <lastmod>2005-01-01</lastmod>
    <changefreq>monthly</changefreq>
   <priority>0.8</priority>
  </url>
</urlset>
Где две первые строки - это заголовок всего файла, последняя – признак окончания файла. Каждый URL должен быть описан между тэгами <url> и </url>, между <loc> и </loc> должен быть помещен URL страницы, между <lastmod> и </lastmod> дата последнего изменения страницы, между <changefreq> и </changefreq> вероятная частота изменения страницы, между <priority> и </priority> приоритет этого URL относительно других URL на Вашем сайте.
Если количество страниц на сайте невелико, то легко вручную составить такой файл в любом редакторе, позволяющем сохранить информацию в кодировке UTF-8. Файл должен быть сохранен как sitemap.xml.
Google предлагает программу (генератор) такого файла с такими условиями:
Вы должны уметь подключаться и запускать скрипты на Вашем веб-сервере.
На Вашем веб-сервере должен быть установлен Python 2.2 или более поздней версии.
И так далее…
Предлагаются также другие программы (генераторы) со схожими условиями.
Если нет возможности запускать скрипты на сервере, например на narod.ru, или просто удобнее сгенерировать такой файл на своем домашнем компьютере, то небольшая программа на Perl поможет Вам в этом.
На компьютере должен быть установлен интерпретатор Perl (взять бесплатно можно здесь). Структура сайта на домашнем компьютере должна совпадать со структурой сайта на сервере.
Достаточно разместить генератор в корневую папку сайта и запустить на выполнение. В этой же папке будет создан файл sitemap.xml в соответствии с Вашими настройками и предпочтениями, а если таковой существует, то Внимание! – он будет заменен.
Настройки просты и их количество зависит только от Ваших потребностей.
Обязательно только указать в переменной $core_site URL Вашего сайта, например для моего: "http://blankinew.narod.ru/" или например: "http://www.site.ru/".
Для всех файлов, попадающих в sitemap.xml, программа автоматически укажет даты их последнего изменения в необходимом формате.
Можно указать перечень исключений, файлы из которых не попадут в sitemap.xml: список папок; список расширений (типов) файлов; список имен файлов. Например, для моего сайта в таком списке: папка image/ список расширений xml css js и имя файла test. Можно эти списки оставить пустыми.
Для всех файлов по умолчанию установлена вероятная частота их изменения: monthly и приоритет: 0.9 (можно изменить).
Предусмотрены настройки этих значений для групп файлов:
1)для всех папок задаются списки расширений файлов и для каждого списка файлов с указанными расширениями – приоритет и вероятная частота изменения (таких списков может быть сколько угодно или ни одного). Например для моего сайта: doc zip rar 0.8 yearly, gif 0.7 yearly ;
2) указывается папка и для файлов этой папки список расширений файлов (можно не указывать) и для этой группы - приоритет и вероятная частота изменения. Если списки расширений не указаны, то подразумевается – все файлы из данной папки. Например tmp/ txt 0.3 daily, log/arj/ 0.1 never. Количество папок со списками расширений неограниченно (или ни одной).
Если настройки не указаны, действуют значения по умолчанию.
Формат для вероятной частоты изменения:
always (всегда)
hourly (ежечасно)
daily (ежедневно)
weekly (еженедельно)
monthly (ежемесячно)
yearly (ежегодно)
never (никогда)
Формат для приоритетов: от 0.0 до 1.0
По поводу маскирования сущностей:
1. Символы в именах файлов & ' " > < я бы не стал называть сущностями.
2. Этот генератор предназначен для статичных сайтов (без динамических страниц) и пока маскирование не предусмотрено.
Подробнее о настройках в файле sitemap-readme.txt.

- есть туча генераторов. например http://www.xml-sitemaps.com/

3. как узнать все ли нормально?
- https://www.google.com/webmasters

--------------------

моё портфолио :: мой блог :: мой любимый проект

GZep

Дата 3.5.2007, 23:03 (ссылка)

(нет голосов)

Загрузка ...

участник Винграда

Профиль
Группа: Завсегдатай
Сообщений: 1528
Регистрация: 7.7.2006
Где: Москва

Репутация: нет
Всего: 32

Цитата(ST_Falcon @ 26.11.2006, 16:07

)

Не знаю, используют ли другие поисковики файл

Цитата

Google, Yahoo и Microsoft объявили о принятии единого стандарта для хранения файла Sitemap XML, который используют поисковые системы для индексации веб-страниц. Помимо этого, к совместной работе над совершествованием открытого протокола Sitemap присоединился поисковик Ask.com, сообщает PC World. О стандартизации открытого протокола Sitemap компании договорились в ноябре прошлого года. Теперь владельцам будет проще создавать файл Sitemap на сайте, разместив в robots.txt специальную строку, а поисковым роботам обнаруживать его на сайте. Протокол Sitemap изначально был разработан Google и распространяется по условиям соглашения Attribution-ShareAlike в соответствии со свободной лицензией Creative Commons.

--------------------

Str!pe

Дата 4.5.2007, 08:40 (ссылка)

(нет голосов)

Загрузка ...

профиль удален

Профиль
Группа: Участник
Сообщений: 2426
Регистрация: 12.6.2005
Где: На земле.

Репутация: 9
Всего: 152

Полезный файлик, к использованию на трудноиндексируемых сайтах обязателен.

--------------------

Со мной можно связаться по скайпу или по аське.
Занимаюсь продвижением сайтов - самой таргетированной рекламой.

GZep

Дата 4.5.2007, 10:00 (ссылка)

(нет голосов)

Загрузка ...

участник Винграда

Профиль
Группа: Завсегдатай
Сообщений: 1528
Регистрация: 7.7.2006
Где: Москва

Репутация: нет
Всего: 32

Вопрос: а как он совместим с robots.txt ?

--------------------

Str!pe

Дата 4.5.2007, 10:10 (ссылка)

(нет голосов)

Загрузка ...

профиль удален

Профиль
Группа: Участник
Сообщений: 2426
Регистрация: 12.6.2005
Где: На земле.

Репутация: 9
Всего: 152

Цитата(GZep @ 4.5.2007, 10:00

)

Вопрос: а как он совместим с robots.txt ?

А причем тут РОБОТС вообще? Это просто файл и все, в котором указываются ссылки на все страницы сайта.

--------------------

GZep

Дата 4.5.2007, 10:11 (ссылка)

(нет голосов)

Загрузка ...

участник Винграда

Профиль
Группа: Завсегдатай
Сообщений: 1528
Регистрация: 7.7.2006
Где: Москва

Репутация: нет
Всего: 32

а в robots.txt что тогда указывается? З.Ы. чует мой моск, что я туплю щас сильно...

--------------------

Str!pe

Дата 4.5.2007, 10:39 (ссылка)

(нет голосов)

Загрузка ...

профиль удален

Профиль
Группа: Участник
Сообщений: 2426
Регистрация: 12.6.2005
Где: На земле.

Репутация: 9
Всего: 152

Цитата(GZep @ 4.5.2007, 10:11

)

а в robots.txt что тогда указывается? З.Ы. чует мой моск, что я туплю щас сильно...

Очень сильно smile

файл robots.txt предназначен для ЗАПРЕТА ИНДЕКСАЦИИ или частичного ограничения индексации сайта полисковыми машинами.
Всю что можно информацию по нему для рунета советую сикать на вот этом сайте специально и целиком посвященном вопросам этого файла.

--------------------

GZep

Дата 4.5.2007, 16:12 (ссылка)

(нет голосов)

Загрузка ...

участник Винграда

Профиль
Группа: Завсегдатай
Сообщений: 1528
Регистрация: 7.7.2006
Где: Москва

Репутация: нет
Всего: 32

Str!pe, спасибо большое... smile

--------------------

Levsha

Дата 31.5.2007, 06:44 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 294
Регистрация: 30.9.2005

Репутация: нет
Всего: 4

Так все таки про robost

Цитата(GZep @ 3.5.2007, 23:03

)

О стандартизации открытого протокола Sitemap компании договорились в ноябре прошлого года. Теперь владельцам будет проще создавать файл Sitemap на сайте, разместив в robots.txt специальную строку, а поисковым роботам обнаруживать его на сайте.

GZep, ты цитату откуда взял?

--------------------

Предлагаем создание сайта в Хабаровске - http://web-alt.ru.
А ты сдал анализы? Самый полный анализ сайта!

Levsha

Дата 31.5.2007, 07:01 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 294
Регистрация: 30.9.2005

Репутация: нет
Всего: 4

Официальный сайт:
http://www.sitemaps.org/ru/

Добавлено через 6 минут и 16 секунд
Ну и наиболее полная инфа здесь http://www.sitemaps.org/ru/protocol.php#sitemapXMLExample

Добавлено через 8 минут и 11 секунд
GZep, ты све таки не тупил smile

Цитата

Как указать местоположение файла Sitemap в файле robots.txt

Можно указать местоположение файл Sitemap, используя файл robots.txt. Для этого просто добавьте следующую строку:
Sitemap: <sitemap_location>

URL <sitemap_location> должен быть полным URL для файла Sitemap, как, например: http://www.primer.ru/sitemap.xml

Эта инструкция не зависит от строки агента пользователя, поэтому неважно, где она размещается в файле. При наличии файла индекса Sitemap можно включить местоположение только этого файла. Перечислять каждый отдельный файл Sitemap, указанный в файле индекса, не нужно.

Взато здесь:http://www.sitemaps.org/ru/protocol.php#submit_robots

--------------------

Предлагаем создание сайта в Хабаровске - http://web-alt.ru.
А ты сдал анализы? Самый полный анализ сайта!

Levsha

Дата 31.5.2007, 07:32 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 294
Регистрация: 30.9.2005

Репутация: нет
Всего: 4

Вполне логично, т.е. robots.txt можно направить на другой файл, да и гугле можно зарегистрировать другой файл, а этот другой файл уже можно и сделать динамическим, и формировать его программно.

--------------------

Предлагаем создание сайта в Хабаровске - http://web-alt.ru.
А ты сдал анализы? Самый полный анализ сайта!

GZep

Дата 31.5.2007, 10:16 (ссылка)

(нет голосов)

Загрузка ...

участник Винграда

Профиль
Группа: Завсегдатай
Сообщений: 1528
Регистрация: 7.7.2006
Где: Москва

Репутация: нет
Всего: 32

теперь я нефига не понял... :-(

--------------------

Levsha

Дата 31.5.2007, 10:35 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 294
Регистрация: 30.9.2005

Репутация: нет
Всего: 4

GZep, зато я все понял. Спрашивай, отвечу.

Если ты про это:

Цитата(Levsha @ 31.5.2007, 07:32

)

то просто не обращай внимания.

--------------------

Предлагаем создание сайта в Хабаровске - http://web-alt.ru.
А ты сдал анализы? Самый полный анализ сайта!

Str!pe

Дата 31.5.2007, 10:39 (ссылка)

(нет голосов)

Загрузка ...

профиль удален

Профиль
Группа: Участник
Сообщений: 2426
Регистрация: 12.6.2005
Где: На земле.

Репутация: 9
Всего: 152

Цитата(Levsha @ 31.5.2007, 07:01

)

URL <sitemap_location> должен быть полным URL для файла Sitemap, как, например: http://www.primer.ru/sitemap.xml

Абалдеть. Не знал...

--------------------

GZep

Дата 1.6.2007, 11:41 (ссылка)

(нет голосов)

Загрузка ...

участник Винграда

Профиль
Группа: Завсегдатай
Сообщений: 1528
Регистрация: 7.7.2006
Где: Москва

Репутация: нет
Всего: 32

ладно, щас экзамены в вуз вступительные сдам и тогда уже на "остывшую" голову разберусь с этим вопросом раз и навсегда. smile

--------------------

0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема \| Google \| Следующая тема »