步入智能新时代 启明星辰打造网络安全垂直领域大模型
发布时间 2023-09-13ChatGPT引发了人们对生成式人工智能、大模型的高度关注。各行各业在不断运用大模型进行业务融合创新和赋能垂直领域的同时,其自身安全问题以及由此带来的安全风险问题也同样需要重视,以趋利避害,实现人与AI的共生。
正如启明星辰集团CEO严望佳在2023年数博会上所倡导的,“通过加强理论和技术研究,为智能化高速引擎安装‘方向盘’和‘制动器’,构建以人为本的数字善治生态体系,实现人与人工智能协同共生演化。”
启明星辰集团CEO严望佳出席2023中国国际大数据产业博览会
长期以来,网络安全行业面临着业务场景复杂、安全设备众多、告警数据量大、事件分析处置严重依赖专业安全人员经验等挑战,而大模型体现出的通用人工智能,正是应对上述挑战的理想解决方案。目前国内外一些互联网企业和专业安全公司,已开始尝试将大模型应用在安全产品或服务中,提升产品能力和服务效率。
启明星辰基于自身在网络安全领域的多年积累,围绕人工智能赋能安全以及安全的人工智能等角度,打造了网络安全垂直领域大模型,并应用于网络安全业务中,主要利用了大模型所具备的世界知识和思维链能力:
1、丰富的世界知识:大模型在训练过程中读取了各个领域的海量语料库,在其参数中存储了大量客观世界的事实性知识。网络安全业务是知识密集型业务,对安全设备产生的告警做研判、响应和取证,依赖与告警相关的安全知识,这也是过去非常依赖安全人员个人经验的环节。将大模型应用到安全业务中,可以在业务过程中注入相关的安全知识,提升安全人员的认知。
启明星辰在将大模型融入网络安全业务过程中,解决了大模型应用落地的一系列问题,涵盖大模型微调优化、计算资源获取和模型升级迭代等方面:
1、大模型微调优化:由于安全行业的特殊性和专业性,互联网上可公开获取的安全资料不够全面,对于特定问题缺乏有针对性的解决方案。这就导致基于开源语料库训练产生的大模型,对于安全问题的解答缺乏实操性。
在训练优化阶段,启明星辰对国内外开源大模型进行了广泛测试,发现开源大模型均存在不同程度的无效回答(内容虽然正确,但过于宽泛无法实施)、幻觉(内容不符合安全常识)等现象。基于此,利用公司在安全检测和运营领域的多年积累形成的高质量安全案例库,基于LoRA方法微调基座大模型,并设计了大量优化后的Prompt模板,使得优化后大模型生成内容的质量有了显著提升。此外,利用公司积累的安全知识库打造本地向量数据库,基于Langchain框架实现基于本地知识的问答系统,进一步提升了生成内容的可靠性。
2、计算资源配置:大模型的训练和推理都需要大量的计算资源,尤其是GPU资源,而传统企业往往不具备。启明星辰通过借助移动云的算网优势,将大模型的训练优化和推理都部署在了云端,这样不仅解决了自身的资源需求问题,也有助于未来借助移动云,对云上租户提供基于大模型的安全服务。
其实,早在2022年,启明星辰就发布了面向安全运营业务的安全智慧生命体“PanguBot(盘小古)”,初步实现了对安全运营人员指令的语义理解、安全策略制定、执行结果反馈等能力。
当前,由启明星辰打造的网络安全垂直领域大模型,已经作为“PanguBot(盘小古)”升级版的大脑,赋予了“盘小古”更强大的安全智能。
在安全运营业务中,“盘小古”可作为安全分析人员的智能助手,以自然语言的方式接收安全任务并反馈结果,从而扩展安全运营平台功能、提升一线安全人员工作效率。
在将安全数据从日志到告警、再到事件的逐层提炼过程中,基于大模型的智能助手都可以起到关键作用:
1、日志分析能力:日志分析是安全运营中的基础工作,以往需要安全人员将分析需求实现为可运行的SQL语句,再提交到日志数据库中运行,分析运行结果,整个过程费时费力。
借助大模型的思维链能力,安全人员可以用自然语言的方式提交任何的分析需求,大模型在理解任务内容后将其拆解为一系列动作:选取合适的数据表;利用Text-to-SQL能力根据需求生成SQL脚本;将脚本提交到日志库获取返回结果;根据返回内容组织合适的图文方式等,整个流程都由大模型自动实现。有了大模型的加持,安全人员日志分析的效率有了显著提升。
借助大模型所存储的安全知识,智能助手能够对告警内容、上下文信息、攻击手法、资产属性等要素进行专业分析和解读。有了这些丰富的解读内容,安全人员研判的准确率和效率会有明显提升。
3、事件处置能力:对于确定为真实的安全事件,需要尽快执行精准的响应策略,既要能够有效阻断攻击行为进一步发展,又要将阻断的影响范围降到最小。传统做法是安全人员根据实际网络环境和安全设备部署情况,下发相应的阻断策略,整个过程时效性低、对安全人员的依赖度高。
目前基于大模型的智能安全助手,已经在用户的安全运营业务中进行了实验,在赋能安全运营、提升分析效率、提升处置时效性等方面展现出良好的应用前景。未来随着大模型的进一步优化,安全智能助手将会作为移动云上的一项标准安全产品,对移动云上的用户提供智能化安全服务能力。