2004年-2015年AV-C测试成绩汇总之——真实世界动态保护测试和恶意文件手动扫描测试

小小瞻

AV-Comparatives是一家国际性独立杀毒软件测试机构，因提供针对计算机安全产品的综合性与客观性评测结果而闻名

本人今天花了近2个小时的时间将AV-C官网上的真实世界动态保护测试成绩以及恶意文件手动扫描测试成绩进行归纳汇总，制成了以下两张图表。其中，恶意文件手动扫描测试从2004年2月开始至2015年10月止，共23次测试；真实世界动态保护测试从2010年8月开始至2015年6月止，共40次测试（因为AV-C的这项成绩每年在7月和12月才会有详细的样本数据公布，所以现在就没有将6月后的成绩计算进来）。首先请允许我对这两项测试进行简单的说明。第一，恶意文件手动扫描测试从2004年2月开始至2015年10月止，累计测试样本数量达到了12894386个（即一千二百八十九万四千三百八十六个病毒样本），包括病毒，蠕虫，木马，后门等一系列恶意文件。第二，真实世界动态保护测试从2010年8月至2015年6月止，累计测试样本达17586个。不得不说，这两项测试所使用的样本数量之庞大，测试时间之久，非民间测试所能达到。第三，说说我表格的计算方法。对于恶意文件扫描测试，我选取其中11款杀毒软件（包括卡巴斯基，诺顿，比特梵德，大蜘蛛，小红伞，ESET，Panda等），将每一款杀毒软件每一次测试检测到的恶意样本数量相加，然后将这个数量除以这款杀软12年来被测试的总样本量（注意，不是每一款杀软每一次测试都会参加），得到图表1。对于真实世界动态保护测试，我也选取了11款杀软。在这项测试中官方把依靠用户拦截的样本数量也计算在内，而我只计算自动拦截的样本数量。然后将每款杀软的历年拦截的数量除以自己被测试的总样本数量，得到图表2。


图表1（恶意文件手动扫描测试）


图表2（真实世界动态保护测试）

这两张图表反映了这11款杀软在AV-C最全面的表现，在如此高的样本数量下得到的成绩，会更加真实地表现出杀软真正的实力，这也能为那些杀软选择困难者提供充分的参考。最后，附上我这次用到的从官网上得到的历年测试成绩。




备注：手动扫描测试诺顿从2011年开始就不参加了，图表1中诺顿的成绩是依据其2004年至2010年的成绩计算得到的。真实世界动态保护测试诺顿从2012年开始才不参加的，诺顿的这项成绩附图如下：
2010年（8月-11月）诺顿真实世界动态保护测试成绩

2011年（3月-6月）诺顿真实世界动态保护测试成绩

2011年（8月-11月)诺顿真实世界动态保护测试成绩

huihui458

哇，前排，
整理不容易

欧阳宣

第一张图里诺顿那么高的扫描成绩是咋来的

Heavev

手动扫描的话，各家默认启发等级是不是不一样？


比如手动扫描，红伞会默认高启发

sungan01

不得不说楼主厉害

小小瞻

回复第三楼欧阳前辈的疑问。我们知道诺顿已经很久没有参加AV-C的测试了，但是我从官网上得知诺顿从2004年到2010年每次测试都参加，2011年也“被”参加过一次，如果你将我最后的附件下载下来看看，就会发哇(⊙o⊙)哇，诺顿的手动扫描测试成绩怎么这么好，几乎每次都是Advanced+，这就是诺顿为何在我的图标中成绩排第三的原因。不得不说诺顿真是杀软界的前辈，从2004年开始就参加测试了，这时候小红伞还不叫做Avira呢

Dreamerzl

相对于其他杀软来说感觉norton对杀软理念的理解蛮超前的

hemguet

好，很好

欧阳宣

小小瞻 发表于 2015-11-30 09:03
回复第三楼欧阳前辈的疑问。我们知道诺顿已经很久没有参加AV-C的测试了，但是我从官网上得知诺顿从2004年到 ...

也就是说是根据诺顿已有的成绩是吧

要是现在的扫描检测率也这么好就好了

小小瞻

Heavev 发表于 2015-11-30 07:54
手动扫描的话，各家默认启发等级是不是不一样？

官方说多数杀软在送测时都默认成最高设置(即highest)，而极少数杀软不是最高设置而是高设置（我想应该是杀软公司考虑到误报率吧）。对于小红伞，它在测试中的启发不是默认为最高，而是高。