建议卡饭不要在搞误报测试了

显示全部楼层 · 发表于 2009-7-23 16:50:15

前几天就误报测试这个事情，我专门请教了江民科技和金山毒霸的反病毒专家。总的来说还是建议卡饭不要在搞杀毒软件的误报测试。原因有二：

一、误报测试从专业的角度讲扫描的是反病毒厂商所收集的误报库。而专业的误报库个人，甚至论坛是没有的。
二、测试误报时用的是软件的默认设置，因为绝大多数用户使用的都是默认的设置。要在大众化的状态下去测试。

如果卡饭非要搞这个误报测试，个人意见，内部交流可以，不希望把测试的结果放出去。因为结果的说服力不足，甚至可以说没有什么说服力。这个事情做不好会给卡饭带来一些负面的影响，卡饭的病毒测试做的很好，也很有说服力，但是误报测试则不然，因为误报测试有一个很严格的规定限制。而病毒测试则是一个开放性的测试技术，没有相对严格的样本来源规定。

卡饭能把病毒测试做成现在的状态已经很好了，尽自己的能力所及就可以，并没有必要去尝试自己达不到条件的事情，做好自己能力之内的事情才是最聪明的。

显示全部楼层 · 发表于 2009-7-23 17:01:24

说得很好，有些样本要界定起来是很难的，比如注册机之类的东西

显示全部楼层 · 发表于 2009-7-23 17:05:16

这个误报测试是这样的:

1.几个成员提供计算机中的exe文件

2.DZ成员把以前的virlist重新分析，可疑的和病毒都不要，只留下干净文件

3.DZ成员把所有剩下的文件重新分析，还是，可疑的和病毒都不要，只留下干净文件（这个过程可能会重复）

然后才由成员测试，所有的截图资料都留着，误报的病毒也给留着上传了

如果只测试，不放出成绩，我认为我们是白测了（我确实是白测了）。。

对最后一句，持观望态度。。

显示全部楼层 · 发表于 2009-7-23 17:05:33

这个不算的。。

显示全部楼层 · 发表于 2009-7-23 17:08:25

乃没测....

显示全部楼层 · 发表于 2009-7-23 17:14:07

呵呵，楼主是费尔的粉丝，而费尔的成绩这次最差。所以……
楼主还是建议费尔不要参加误报测试为好。

显示全部楼层 · 发表于 2009-7-23 17:14:23

...

梦幻没看见我发的成绩邮件,找别人去了..

显示全部楼层 · 发表于 2009-7-23 17:17:54

首先感谢您对我们工作的支持，但是我需要对您提出的问题进行回答和质疑。

1、请您看看会员上报的结果，很多都确定为false alarm，何以说我们收集不到误报样本？至于那些依然认定为malicious的我们会从中挑选出来，进一步的进行筛选，下一次这些风险文件将会剔除，比如keygen、危险驱动等。
2、我们的误报测试提供了剩余样本，截图，请问AVC，VB100%提供吗？所以说我们的测试成绩接受会员的监督，如果成绩不符或对结果有异议都可以提出。
3、厂商的误报库？那为什么还会误报，建议自行下载相关的误报文件进行测试。
4、误报设置的问题，下次我们会根据会员的意见和选择进行误报测试设置而不是最高设置。对于最高设置问题，我相信LZ看到过AVC的测试，他们也有最高设置的误报测试。
5、何谈没有说服力，杀软的误报文件我们放出来了，怎么会没有说服力，难道只因为费尔一家厂商？
6、我们的样本多出于系统文件，难道厂商不把这个当作误报的收集吗？

总而言之，如果本次测试仅因费尔杀软的问题而没有说服力，那么我只能说LZ以偏概全了。

显示全部楼层 · 发表于 2009-7-23 17:20:29

原帖由 syfwxmh 于 2009-7-23 17:17 发表
首先感谢您对我们工作的支持，但是我需要对您提出的问题进行回答和质疑。

1、请您看看会员上报的结果，很多都确定为false alarm，何以说我们收集不到误报样本？至于那些依然认定为malicious的我们会从中挑选出来， ...

两个方法
一，以后的测试把费尔排除在外
二，费尔按照楼主的要求用默认设置，并做注明。

显示全部楼层 · 发表于 2009-7-23 17:26:47

找你这样说,如果有IK,那IK党是不是要求最低设置?

[建议] 建议卡饭不要在搞误报测试了

回复 2楼悠柚的帖子

回复 3楼 vistabull 的帖子

回复 5楼 liujiehua 的帖子

回复 1楼 zq127 的帖子

评分

回复 9楼大汉天子1 的帖子