Модераторы: Illuminaty
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> Отсканируют ли Роботы? 
V
    Опции темы
codelord
Дата 26.1.2007, 21:22 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 777
Регистрация: 7.5.2005
Где: ты моя темноглаза я где?!

Репутация: нет
Всего: 39



Скажите пожалуйста, есть файл на серваке допустим на неком www.pupkin.ru. Внутри 
этого сайта, да и вообще на других сайтах нет ссылки на файл который находится на этом сайте,допустим
pupkin.txt в папке www на этом сайте. Поисковики типа Google или Yandex увидят этот файл? 
если не указывать об этом явно в файле вроде robots... т.е смысл такой если нигде нет ссылки на этот 
файл, я его могу загрузить себе в браузер вроде www.pupkin.ru/pupkin.txt, а могут ли об этом файле узнать из поисковиков другие юзеры инета?.
Надеюсь понятно объяснил.
Заранее Благодарю.


--------------------
Доступен поиск по исходным кодам в GOOGLE.
http://www.google.com/codesearch
PM MAIL   Вверх
LesnoyChelovek
Дата 26.1.2007, 21:26 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


странник Интернета
**


Профиль
Группа: Участник
Сообщений: 346
Регистрация: 27.2.2006
Где: Русь

Репутация: нет
Всего: 10



роботы видят robots.txt и команды исполняются только с него.


--------------------
Делай добро и бросай его в воду... оно не утонет.. добром к тебе вернеться.
http://picasaweb.google.com/LesnoyChelovek/Photo
PM MAIL   Вверх
codelord
Дата 26.1.2007, 21:34 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 777
Регистрация: 7.5.2005
Где: ты моя темноглаза я где?!

Репутация: нет
Всего: 39



Цитата(LesnoyChelovek @  26.1.2007,  17:26 Найти цитируемый пост)
роботы видят robots.txt и команды исполняются только с него.

Допустим, но скажем у меня на сайте (это не тот про который вопрос) на народе нет этого 
файла и роботы видят сайт. Чето не пойму. Еще пример если скажем скачивать
сайт целиком программой DiskoPump она видит только файлы на которые есть ссылки со страниц, на 
которые в свою очередь тоже есть какие то ссылки. т..е программа не видит файлы автономные файлы на которые  нет ссылок нигде. А видят ли их роботы?


--------------------
Доступен поиск по исходным кодам в GOOGLE.
http://www.google.com/codesearch
PM MAIL   Вверх
AztEK
Дата 27.1.2007, 09:47 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 723
Регистрация: 4.1.2005

Репутация: 4
Всего: 18



Нет. Они, так же как программа, видят только файлы, на которые есть ссылка.
Но если индексирование этой страницы запрещено robots.txt или META-тегом, то не индексируют.


--------------------
Linux is like wigwam -- no windows, no gates, apache inside.
PM MAIL Jabber   Вверх
codelord
Дата 27.1.2007, 10:11 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 777
Регистрация: 7.5.2005
Где: ты моя темноглаза я где?!

Репутация: нет
Всего: 39



понял спасибо.


--------------------
Доступен поиск по исходным кодам в GOOGLE.
http://www.google.com/codesearch
PM MAIL   Вверх
JAPH
Дата 27.1.2007, 10:54 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 312
Регистрация: 8.1.2007
Где: Ленобласть

Репутация: нет
Всего: 23



AztEK, а META-тегом - это как? Можно примерчик?
PM MAIL ICQ   Вверх
mishaSL
Дата 28.1.2007, 15:44 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Участник Клуба
Сообщений: 1046
Регистрация: 10.1.2007
Где: Санкт-Петербург

Репутация: 8
Всего: 54



JAPH, вот так <meta name="robots" content="noindex, nofollow" />


--------------------
Лучший способ научиться программированию - это посмотреть как это делают другие...
PM MAIL   Вверх
bassomano
Дата 29.1.2007, 02:05 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 5
Регистрация: 19.1.2007

Репутация: нет
Всего: нет



Ещё можно сделать так
Код

<head>
...
<link rel="subsection" href="file.html">
...
</head>

и, по идее, роботы должны проиндексировать этот файл, даже если нет на него ссылок.
PM MAIL   Вверх
  
Ответ в темуСоздание новой темы Создание опроса
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Вёрстка веб-сайтов | Следующая тема »


 




[ Время генерации скрипта: 0.0455 ]   [ Использовано запросов: 21 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.