01 — 方法介绍

DeepVulHunter 由五个阶段构成,通过“示例学习→推理解耦→结果验证”逐步减少 LLM 的推理偏差。

  • ① 漏洞知识库构建:

    基于Big-Vul 构建包含源代码、CVE 信息、补丁、描述的结构化数据库。

  • ② 相似代码检索:

    利用 CodeT5P 进行语义嵌入,通过 Faiss 检索最相似的两个漏洞相关代码片段。

  • ③ 相似代码分析(第一轮):

    LLM 对所检索样例分析漏洞成因、触发条件与修复方式。

  • ④ 目标代码分析(第二轮):

    在相似样例及其分析结果的辅助下,LLM 对目标代码进行漏洞判断。

  • ⑤ 结果验证(第三轮):

    对初判“无漏洞”的样本再进行独立验证,有效减少漏报

图 1. DeepVulHunter 多轮分析框架

小结:DeepVulHunter 通过“检索 + 推理 + 验证”的方式,为 LLM 建立了一个更稳定、可靠的漏洞检测全过程,显著降低误判与漏判。

02 — 关键机制

  • 基于示例的外部知识注入:

    通过相似代码检索让 LLM 具备“类比推理”能力。

  • 三轮推理结构:

    将分析拆解成“学习—判断—复核”的流程。

  • 代码长度偏差发现:

    论文指出 LLM 更倾向将长代码误判为漏洞代码,并提出解决办法。

  • 与模型无关:

    框架适用于 Llama、Deepseek 等不同 LLM。

模块 实现方式 主要作用
漏洞知识库 整合 Big-Vul 代码、漏洞标签、CVE 信息、补丁内容 提供检索与推理所需的基础知识
相似代码检索 CodeT5P Embedding + Faiss 最近邻召回 提供与目标代码最接近的漏洞模式
相似代码分析(Round 1) LLM 分析漏洞类别、触发路径、补丁原理 形成可供推理的“示例知识”
目标代码分析(Round 2) 在样例分析基础上进行推理 减少幻觉,提高判断准确度
独立验证(Round 3) 再次分析初判为“无漏洞”的样本 降低漏报,提升稳健性

小结: 多轮推理机制让 LLM 从“一次性判断者”进化为“循证分析者”,降低不确定性带来的错误。

03 — 实验结果

研究团队在真实的 1,937 条漏洞样本上评估了不同模型的表现,包含:

Llama-3.1-8B / 70B / 405B,以及 Deepseek-V3、Deepseek-R1。

最高准确率达到了 75.3%(Llama 405B),相比当前方法显著提升。

模型 Accuracy Vul_F1 NoVul_F1
LLMVD(no CoT) 0.525 0.682 0.065
LLMVD(CoT) 0.741 0.797 0.640
VulACLLM 0.520 0.000 0.690
Llama-70B 0.608 0.700 0.435
Llama-405B 75.3 0.766 0.689
Deepseek-V3 0.704 0.725 0.679

小结:DeepVulHunter在不同模型上均带来了不同幅度的提升,且论文中给出的最优实验配置(Llama-405B + R3)达到了 75.3% 的检测准确率,显著优于仅使用单轮 LLM 判断的基线方法。

📌 总结

DeepVulHunter 展示了利用 外部知识 + 多轮推理 强化 LLM 漏洞检测能力的新范式。该框架无需修改模型结构即可应用于不同规模的 LLM,适合在企业级代码审计系统中落地。

那么,如何系统的去学习大模型LLM?

作为一名深耕行业的资深大模型算法工程师,我经常会收到一些评论和私信,我是小白,学习大模型该从哪里入手呢?我自学没有方向怎么办?这个地方我不会啊。如果你也有类似的经历,一定要继续看下去!这些问题啊,也不是三言两语啊就能讲明白的。

所以我综合了大模型的所有知识点,给大家带来一套全网最全最细的大模型零基础教程。在做这套教程之前呢,我就曾放空大脑,以一个大模型小白的角度去重新解析它,采用基础知识和实战项目相结合的教学方式,历时3个月,终于完成了这样的课程,让你真正体会到什么是每一秒都在疯狂输出知识点。

由于篇幅有限,⚡️ 朋友们如果有需要全套 《2025全新制作的大模型全套资料》,扫码获取~
在这里插入图片描述

👉大模型学习指南+路线汇总👈

我们这套大模型资料呢,会从基础篇、进阶篇和项目实战篇等三大方面来讲解。
在这里插入图片描述
在这里插入图片描述

👉①.基础篇👈

基础篇里面包括了Python快速入门、AI开发环境搭建及提示词工程,带你学习大模型核心原理、prompt使用技巧、Transformer架构和预训练、SFT、RLHF等一些基础概念,用最易懂的方式带你入门大模型。
在这里插入图片描述

👉②.进阶篇👈

接下来是进阶篇,你将掌握RAG、Agent、Langchain、大模型微调和私有化部署,学习如何构建外挂知识库并和自己的企业相结合,学习如何使用langchain框架提高开发效率和代码质量、学习如何选择合适的基座模型并进行数据集的收集预处理以及具体的模型微调等等。
在这里插入图片描述

👉③.实战篇👈

实战篇会手把手带着大家练习企业级的落地项目(已脱敏),比如RAG医疗问答系统、Agent智能电商客服系统、数字人项目实战、教育行业智能助教等等,从而帮助大家更好的应对大模型时代的挑战。
在这里插入图片描述

👉④.福利篇👈

最后呢,会给大家一个小福利,课程视频中的所有素材,有搭建AI开发环境资料包,还有学习计划表,几十上百G素材、电子书和课件等等,只要你能想到的素材,我这里几乎都有。我已经全部上传到CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
在这里插入图片描述
相信我,这套大模型系统教程将会是全网最齐全 最易懂的小白专用课!!

Logo

火山引擎开发者社区是火山引擎打造的AI技术生态平台,聚焦Agent与大模型开发,提供豆包系列模型(图像/视频/视觉)、智能分析与会话工具,并配套评测集、动手实验室及行业案例库。社区通过技术沙龙、挑战赛等活动促进开发者成长,新用户可领50万Tokens权益,助力构建智能应用。

更多推荐