反垃圾邮件技术讨论

昨天晚上参加了METASwarm技术交流会，该公司CEO 马文.香农 向我们这些ISP代表展示了关于他们的反垃圾邮件系统的技术。技术通过对邮件，短信（ＳＭＳ）以及钓鱼网站（fishing）的介绍，他们直接分析这些技术在互联网上传输的2进制码进行分析，然后对于各类如：正常邮件----唯一邮件，垃圾邮件-----批量邮件、隐藏地址的邮件，加上其标签进行封装，然后在接收时对于标签进行过滤，以达到防垃圾效果。

二进制处理时对内容的关键部分进行比对，如 主题，发件地址，发件姓名，等6个关键内容大概占所有内容的17%到25% 然后对每个部分进行取样，取样点2个，然后对6个关键部分分别比对，达到80% 相同的就认为是同类，加上相同hash标签。

在实现时考虑到分析标签时所需的系统消耗，把分析和过滤分成2个服务器进行，然后在开始进行一周的分析工作，提前把进入用户公司的大量信息进行分类加标签，其后对已分类的信息进行过滤就提高了效率，而对于新的类型再返回到分析服务器进行加入标签，他们承认这样可能会漏一两个新的垃圾邮件。但其后就会阻止新的类。

他们还有个技术是通过对垃圾邮件的源头查询，如果认定发信源，就可以从源头进行封堵，据说是通过对smtp的包进行追踪。

我对于这种技术有个问题，如果发生黑客利用远程的邮件服务器进行邮件发送，那么如何进行源头确认？马文先生解释了很多，但是翻译先生由于对于专业的知识不足无法进行翻译，所以我对该技术仍抱有怀疑，不知是否糊弄，感觉还得我还得把哑巴英语再深造下。

据说香农先生就是香农定理创始人的一位表外孙（他们提这个颇有点.......）