Bayesian Engine for Spam / Non-Spam Detection
Bayesian support within the new Spam Filtering system has been completed. Bayesian classification is a mathematical process whereby machines can actually learn. Through repeated exposure to known samples of spam (and non-spam) Bayesian enabled software can learn to recognize patterns. Over time, Bayesian classification techniques grow more and more reliable.

MDaemon supports Bayesian classification through its incorporation of the SpamFilter heuristic software and through use of a "learning" program that is used to rapidly process and index spam and non-spam sample messages. The learning tool, SA-Learn, will be executed by MDaemon at midnight each night. The tool will examine the content of a "known-spam" folder and a "known-non-spam" folder. You provide the folders and the content. Since the Bayesian results improve over time the scoring tends to get more and more accurate.

SA-Learn trusts that the messages you feed it really and truly are spam and/or non-spam. It takes your word that the input data is accurate. Here's what you should do:

Go to the Spam Filtering|Bayesian tab and use the "Pub Folder" buttons to create two public folders - one for false negatives (messages that should have been flagged as spam but weren't) and another folder for false positives (messages that were incorrectly flagged as spam). Make these folders accessible to all your IMAP users. Now, instruct your users to place copies of any false positive or false negative messages that they receive into these public folders. MDaemon will process them through the learning tool at midnight each night. After processing, these messages are automatically deleted.


PS Как вам такое??

-----------
взято с MDaemon

Пример реализации того, что мы ищем нам подсказывает сама природа. Вспомним школьный курс биологии… Клетка. Ее мембрана свободно пропускает воду, питательные вещества и кислород. Но она задерживает многие вредные газы. Лишь микробы способны проникнуть сквозь нее, но внутри его ждет фагоцитоз. Стоит заметить, что сама по себе мембрана не мешает, а даже помогает клетке общаться с миром :-). Вот к такой системе нам и надо стремиться. А для этого на мой взгляд нужно в первую очередь подумать, а не тупиковая ли та идея, тот алгоритм от которого мы оттолкнулись. Не приведет ли она нас к ограниченности общения| Я думаю, что надо попытаться начать с нуля (полного нуля) и разработать принципиально новую программу, а не двигать уже устаревшие и выработавшиеся механизмы.

Phantomouse, я с тобой согласен. Необходимо что-то принципиально новое!!!! Новый протокол, новые принципы, возможно новая сеть. А что если действительно организовать MailNet? Ж)

Итак... Есть идеи по поводу основы такой сети?

Идей у меня пока нет. Но..

Я вот никак не пойму как POP3 работает. То есть рфц я посмотрел, но не пойму, как сделать сервак поповоский? Может нужно за основу брать уже что-то сделаное (поп3, imap), но делать это заново? То есть использовать те же принципы, но делать тоже самое с нуля?

Я думаю, именно так и надо делать... Но фильтры нужно включать как на стороне сервера так и не стороне клиента... И вообще, можно первое время вообще не пускать в эту сеть внешние письма... Тогда мы сможем отслеживать спаммеров внутри сети... Ну а потом, просто поставить фильтрацию и пустить внешние письма внутрь... тогда кто захотел безопасности, с нами... А кто нет просто сможет общаться со счастливчиками )))

)) Согласен, но ты меня чуть не грузанул ))

http://www.downloads.ru/news/antispam.hts

Цитата

http://www.downloads.ru/news/antispam.hts

тупо как-то при большом объеме писем вероятность совпадения по размеру текста очень большая.

кроме того метод приведет к централизованной обработке писем (в этом случае он должен быть, по словам автора, особенно эффективен ), а это не есть гуд. Интернет разрабатывался как децентрализованная система...

Не знаю, может кто-то уже это и предлагал, но у меня времени читать все не хватило. Почему не сделать на каждый емаил список разрешенных адресов, плюс определенную тему, с коротой почта будет приниматься отовсюду. Например, у меня так и сделано, единственное неудобство - нет удобной утилиты конфигурирования, приходится лазить через браузер, ну да по-другому в данном случае и никак - сервер не мой. В случае, если спамеры начинают присылать письма с этой темой, тему можно в любой момент поменять. К слову, ни одного письма, которое я бы тут же удалил (кроме ошибок с сервера), мне не приходило с февраля этого года, когда я этот фильтр поставил. Конечно, некоторые неудобства существуют, но их можно обойти тоже.

А вообще самый хороший способ защититься от спама - не раскидываться своим мыльником, особенно на сомнительных сайтах и форумах...

Да ... меня больше всего убило дополнение к статье

Цитата

http://www.downloads.ru/news/antispam.hts

на счет перемешанного текста разного цвета ... Вообще идеи тут очень даже не чего ... а нельзя действительно придумать какой нибудь лингвистичиский алгоритм ? Чтоб текст анлизировал, как если бы сам человек читал и отбрасывал письма рекламного характера ...

Тут кто то сказал на счет того что mail.ru фиговый сервак ... не согласен, у меня там мыло которое я всегда использую, и у спамеров мой мыльник давным-давно есть, но больше одного-двух спам-писем в неделю, мне не приходит

Майл.Ру использует фильтр Спамтест, который фильтрует в том числе и по лингвистическим сигнатурам письма.

Кстати, "письма рекламного характера" - очень размытое понятие. Понятно, что "Заработай $1,000,000,000,000 не выходя из дома" - реклама, а как насчет чего-нибудь в плане:

Цитата

Subject: Re: Привет! Вася, привет! Слушай, вот я тут лазил по инету и наткнулся на неплохой сайтик... Там такое!... ...

ну и тому подобное... То есть даже если будет анализировать интеллект (неважно, искусственный или нет), он с большой долей вероятности такое пропустит. А мне такое приходило раньше, и не раз... Я поначалу думал даже, что где-то что-то глюкануло и мне пришло чужое письмо. А если пытаться отфильтровать и это - начнутся ложные срабатывания, которые навредят еще больше, чем сам спам... То есть, имхо, тут надо анализировать не содержание, а именно на уровне символов...

Совершенно согласен с NightGoblin.
Мне в последнее время приходит по нескольку писем такого рода в неделю.