где можно почитать как спроектировать поисковой парсер, который бы лазил по страницам сайта и искал нужную информацию.

принцип работы как у пауков которые лазят по сайтам и выдирают e-mail-ы для спам базы

так же помог бы готовый пример

А что тут проектировать? База данных сайтов и посещенный страниц. Заходите на главную страницу сайта, регэкспом или парсером на конечном автомате находите все внутренние ссылки (это те которые не начинаются на [protocol]://) и заносите их в таблицу страниц. Выдираете интересующую вам информацию и переходите к следующей странице. После парсинга нужно ставить processed=1 или в дату обработки, если требуется поддержание в актуальном состоянии. Ничего сложного тут нет. Реализовать можно практически на любом языке с помощью CURL (он поддерживает кукисы). Только нужно учитывать некоторые моменты: 
1) отсутствие JS (но тоже можно решить на сервере). 
2) некоторые сайты встраивают sid в GET запрос, и на одну страницу можно зайти бесконечное количество раз.

Если заморочится сильнее, то можно использовать движек огнелиса запустив его в виртуальном дисплее. 

а что за движёк огнелиса?

Firefox. 
Вот тут: https://developer.mozilla.org/en/Building_a...sion#section_18 рассказывается как можно запускать приложение в пределах Firefox (не знаю как лучше сформулировать). 

а какие могут подайти алгартмы, кроме конечных автоматов? чтобы можно было сравнить.
(и чо я это в универе прогулял)

У меня где-то был готовый проект. Как найду - выложу, думаю поможет.



------------------
Заходите http://www.zveriseo.ru/ не пожалеете

Это сообщение отредактировал(а) Alxndrov - 23.4.2010, 19:35

спасибо буду ждать

Если до сих пор интересует, то есть http://code.google.com/p/whalebot/ моя реализация, могу отвечать на любые вопросы