<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
<head>
  <meta content="text/html; charset=ISO-8859-1"
 http-equiv="Content-Type">
  <title></title>
</head>
<body text="#000000" bgcolor="#ffffff">
On 06/04/2009 07:53 AM, Rodd Clarkson wrote:
<blockquote cite="mid:1244116405.3313.15.camel@moose" type="cite">
  <pre wrap="">Sadly, I'm not feeling like being manual about this, and I guess that I
just expect my mail client to work well with the spam software and do it
for me.  After all, my mail client has a great collection of ham and
spam so if I can do something like it manually, then surely it can't be
hard for the spam software to do it without me having to thing about it.

bogofilter used to work well, and I'm hoping that it can once again be
the great spam filter it was, fast and accurate.
  </pre>
</blockquote>
I can't speak specifically to the integration of bogofilter into
evolution, since I use a completely home-grown bogofilter integration,
which, as shown <a href="http://stuff.mit.edu/%7Ejik/#spam">here</a>,
successfully blocks thousands of spam messages and viruses per day.<br>
<br>
However, I do want to reiterate what Anne said.&nbsp; She's right that the
spammers are getting smarter.&nbsp; They're <i>always</i> getting smarter
-- it's a constant battle for the anti-spammers to keep up with the new
ideas that the spammers come up with.&nbsp; Therefore, what worked well
enough is no longer good enough.<br>
<br>
For bogofilter to be most effective, here's what needs to happen:<br>
<ol>
  <li>Incoming email needs to be divided into three categories -- ham,
spam, and unsure -- not just into ham and spam.</li>
  <li>Ham and spam messages needed to be added to the bogofilter
database automatically after they are categorized.</li>
  <li>Unsure messages need to be categorized by the user and then added
to the bogofilter database as either ham or spam, depending on the
user's categorization.</li>
  <li>Incorrectly classified messages need to be reclassified when they
are detected, e.g., a spam message incorrectly classified as ham needs
to first be removed from the database as ham and then added to the
database as spam.</li>
  <li>Bogofilter needs to be tuned periodically using a large
collection of known-ham and known-spam messages.</li>
  <li>The bogofilter database needs to be pruned periodically, i.e.,
words that haven't been seen in any incoming email in a while (I
personally use 180 days as my threshold) need to be removed, preferably
before tuning.</li>
</ol>
All of these are important, but the first four are by far the most
important.&nbsp; If the evolution integration doesn't use tristate
classification, or if it doesn't make it easy for you to identify and
classify unsure messages and reclassify incorrectly classified ones,
then it is inevitable that over time, bogofilter's ability to detect
spam will degrade.<br>
<br>
&nbsp; jik<br>
<br>
</body>
</html>