本地部署小型语言模型与商用大型语言模型对比:安全运营中心与计算机安全事件响应团队中的提示工程与事件分类
On-Premise SLMs vs. Commercial LLMs: Prompt Engineering and Incident Classification in SOCs and CSIRTs
AI总结:
本研究对比本地部署开源小模型与商用专有大模型的安全事件分类性能,基于真实匿名事件数据集测试五种提示工程技术效果,验证开源模型在隐私、成本与数据主权上的优势。
摘要:
本研究评估用于安全事件分类的开源模型,将其与专有模型开展对比。研究采用经匿名处理的真实事件数据集,依据NIST SP 800-61r3分类体系完成类别划分,使用PHP、SHP、HTP、PRP、ZSL共五种提示工程技术处理数据。结果显示,尽管专有模型准确率仍更高,但本地部署的开源模型在隐私保护、成本效益与数据主权方面具备优势。
英文摘要:
In this study, we evaluate open-source models for security incident classification, comparing them with proprietary models. We utilize a dataset of anonymized real incidents, categorized according to the NIST SP 800-61r3 taxonomy and processed using five prompt-engineering techniques (PHP, SHP, HTP, PRP, and ZSL). The results indicate that, although proprietary models still exhibit higher accuracy, locally deployed open-source models provide advantages in privacy, cost-effectiveness, and data sovereignty.
机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。