← 返回列表

MSS如何评价?以MITRE最新评估方法为指引

聚合站 SecWiki技术 作者 蒋讲数据 发布 2023年8月24日 21:57 入库 2026-11-18T09:23:11

在前面系列文章中,我以MITRE Engenuity ATT&CK评估为视角,结合微软和CrowdStrike的新闻稿、白皮书和MITRE评估结果,分别介绍了它们各自的MSS能力。我的观点是:MSS一定要经过实战的锤炼。面对“手敲命令就能在几分钟内攻破基础设施网络”的攻击者,如何应对?继续仅靠特征库和补丁建围墙,收点日志画套可视化全家桶,就能御敌于国门之外???

今年早些时候,MITRE开始征集2023年Engenuity ATT&CK评估参与者,于2023年6月30日截止征集,在第四季度启动评估,2024年第二季度或第三季度才公布结果。

2023版评估目标

评估结构旨在满足以下目标:

让最终用户可以客观地了解如何利用具体商业网络安全能力来应对已知攻击者的行为;

提高商业安全产品透明度,MSSP在缓解已知攻击者行为方面的真实能力到底如何;

推动MSSP增强其产品能力,以更好地应对已知攻击者的行为。

于甲方,如果某人负责本单位的网络安全建设,却长期被各种营销材料搞得晕头转向,那么从大量同质化的产品中筛选和识别出哪种安全解决方案最适合该单位,都会是一种沉重负担。最终,哪种商用MSS可最好地帮助他/她实现安全策略?MITRE希望Engenuity ATT&CK的评估意见,是促成企业下决定购买某个MSS的参考因素之一。

于MSSP,希望能让该MSSP的当前和潜在客户更多地了解该MSSP提供的MSS是如何应对已知攻击者行为的。因此,评估过程可以为参评的MSSP提供一个舞台,以展示其服务能力,并向受众传递其独到之处。

MITRE的第三个目标是希望继续影响安全社区,以强调不断改进对已知攻击者行为特性的识别。许多厂商都加入了MITRE的评估,借此发现他们自己的技术路线中哪里地方应优先改进。当头部客户提出了更高的要求时,参与评估可以为应对这种高要求提前做好准备。

评估方法扩展

为了向安全社区提供额外的价值,MITRE一直在寻找方法来扩展其评估方法。在此次评估中,MITRE希望进一步回答以下问题:

有什么方法可以让场景变得更复杂?

与之前一样,MSS评估将以黑盒方式进行。采用这种方法的目的是确保能真正评价出服务的能力,而不是那些部署的工具。在不透露攻击模拟细节的情况下,MITRE努力使攻击模拟场景比上一轮更复杂。这样才能在发布的结果中捕捉每个MSSP的细微差别,以帮助客户和安全社区辨识。

这一轮,可以发布哪些量化指标?

去年的评估方法包括三种报告状态:已报告、未报告和不适用。MITRE希望在这一轮结果中发布更多的信息。如发布MSSP提供的内容数量指标;一致且客观地获得检测所需的平均时间。MITRE对评估方法的扩展,目的是支撑客户做出购买决定。

如何处理每次评估中收集的定性信息?

在评价结果中支持定性信息总是很棘手。MITRE的首要原则是客观,因此,应确保在整个评估过程中,特别是在发表的结果中不插入主观评论。虽然这是惯例,但MITRE可以收集可能有助于进行定性的数据,这些信息可以在发布结果时公布。例如,MSSP是否将已报告的活动适当地归因于特定的攻击者?评估结果中是否提供了补救建议?这些数据点将帮助安全社区了解每个MSSP在评估中对定性信息的掌握程度。

这些问题的答案如何指导MITRE改进其评估工具?

尽最大努力进行评估是关键;结果还必须以最有意义的形式呈现,以便安全社区能够有效地消化它们。简单地说,如果不能使结果更可用,则上面所进行的扩展就没有意义。为此,MITRE希望显著改善其UI,以支持评估方法扩展。包括可支撑定性和定量数据,改进现有分析工具。

© 2023 MITRE Engenuity, LLC. Approved for Public Release. Document number AT0043

原文链接:https://mp.weixin.qq.com/s/dTa7PvC_vW4nvj5FX3hYhg