楼主: hdy0775
收起左侧

[分享] 总结:如何理性、正确地看待本次AV-C测试?(有图有真相)

   关闭 [复制链接]
哀酱俏佳人
发表于 2012-4-19 22:24:16 | 显示全部楼层
hdy0775 发表于 2012-4-19 22:20
有什么问题?
说出来给大家听一听。。。

查杀率第一,误报第二,的确,可以说,查杀的有效率低了,降级无可非议,但是你的计算方法错了
独家的记忆
发表于 2012-4-19 22:27:16 | 显示全部楼层
hdy0775 发表于 2012-4-19 22:20
有什么问题?
说出来给大家听一听。。。

问题一堆
不知道白文件的具体数量而将“多杀1500个样本”和才“多误杀131个白文件”进行对比

假设白文件的数量在只有200个,而360误杀149个,占75%左右,那么30万个样本会误杀多少呢?22.5万,这样算下来比QQ误杀的文件数量都上万了。

再假设白文件数量在300万个,相同的算法,360在30万样本时,只比QQ多误杀几个而已。

在参照物不一样的情况下进行对比显然有很严重的问题
心碎乌托邦
发表于 2012-4-19 22:27:24 | 显示全部楼层
明镜星空 发表于 2012-4-19 16:44
这就是所谓的“断章取义”式的引导么。

误报如果算百分率的话就是白和黑在一起的总样本,单单用白样本来测误报是不准确的。。。
独家的记忆
发表于 2012-4-19 22:31:30 | 显示全部楼层
心碎乌托邦 发表于 2012-4-19 22:27
误报如果算百分率的话就是白和黑在一起的总样本,单单用白样本来测误报是不准确的。。。

如果这样,那查杀率怎么算?

查杀数/(样本数+正常文件数)   如果是这样,这个不叫查杀率

查杀数/样本数   ?  那为什么误报率不是 查杀数/正常文件数  ?
心碎乌托邦
发表于 2012-4-19 22:35:35 | 显示全部楼层
独家的记忆 发表于 2012-4-19 22:31
如果这样,那查杀率怎么算?

查杀数/(样本数+正常文件数)   如果是这样,这个不叫查杀率

数学告诉你是总样本数为基数,包括白样本和黑样本,正确查杀率是判断正确的除以总数,而误报率是白杀成黑,或者黑杀成白的,总之判断错误的概率。
chengfeixun
发表于 2012-4-19 22:35:40 | 显示全部楼层
独家的记忆 发表于 2012-4-19 22:31
如果这样,那查杀率怎么算?

查杀数/(样本数+正常文件数)   如果是这样,这个不叫查杀率

别争论这个问题了 楼主是准备玩个数字游戏 结果被聪明的群众看出来那算法有问题了...
hdy0775
头像被屏蔽
 楼主| 发表于 2012-4-19 22:35:48 | 显示全部楼层
独家的记忆 发表于 2012-4-19 22:27
问题一堆
不知道白文件的具体数量而将“多杀1500个样本”和才“多误杀131个白文件”进行对比

我估计误杀测试中只有150个样本,而360却误杀了149个,太糟糕了。
不过估计是估计,证据在哪里呢?
如果不是同一样本集,
那么,
查杀率和误报数就没有什么关联了,
那AV-C官网将它们放在一起向大家展示,有意义吗?
hdy0775
头像被屏蔽
 楼主| 发表于 2012-4-19 22:39:00 | 显示全部楼层
lmywen 发表于 2012-4-19 22:24
查杀率第一,误报第二,的确,可以说,查杀的有效率低了,降级无可非议,但是你的计算方法错了

错在哪里?
计算的标准是什么?
由谁来订制的标准?
是否得到大家的认同?
哀酱俏佳人
发表于 2012-4-19 22:40:29 | 显示全部楼层
hdy0775 发表于 2012-4-19 22:39
错在哪里?
计算的标准是什么?
由谁来订制的标准?

149/300000?这条式子出来是什么?
独家的记忆
发表于 2012-4-19 22:43:28 | 显示全部楼层
心碎乌托邦 发表于 2012-4-19 22:35
数学告诉你是总样本数为基数,包括白样本和黑样本,正确查杀率是判断正确的除以总数,而误报率是白杀成黑 ...

我也同意这样的算法,但可惜的是AVC不是这样算的。

正确查杀率=判断正确的数量(报毒或者报安全都正确的数量)/总数(包含黑白)
误报率=(误报白文件个数+报病毒为安全文件个数)/总数(包含黑白)

如果上述公式正确,正确查杀率+误报率=100%
但实际上呢?360误报49个,占30万总数的多少?0.5%
查杀率为99.9%
相加超过100%

所以AVC不是按照这个公式计算的
您需要登录后才可以回帖 登录 | 快速注册

本版积分规则

手机版|杀毒软件|软件论坛| 卡饭论坛

Copyright © KaFan  KaFan.cn All Rights Reserved.

Powered by Discuz! X3.4( 沪ICP备2020031077号-2 ) GMT+8, 2025-1-12 20:43 , Processed in 0.089625 second(s), 14 queries .

卡饭网所发布的一切软件、样本、工具、文章等仅限用于学习和研究,不得将上述内容用于商业或者其他非法用途,否则产生的一切后果自负,本站信息来自网络,版权争议问题与本站无关,您必须在下载后的24小时之内从您的电脑中彻底删除上述信息,如有问题请通过邮件与我们联系。

快速回复 客服 返回顶部 返回列表