java 爬取cnvd 漏洞库

zls的故事 2017-11-27 09:41:33

求大神给个源码学习学习

...全文

323 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

该博客介绍了一个Python爬虫程序，用于抓取中国国家信息安全漏洞库(CNVD)中不同类型的漏洞信息。爬虫首先获取并处理登录所需的cookie，然后遍历列表页获取最大分页数，再逐页抓取详情页内容。每页内容解析为包含漏洞名称、CNVD-ID、危害级别、CVE ID等信息的字典，并存储到Excel文件中。爬虫支持不同类型的漏洞分类，如OS、WEB应用、网络设备等。

该代码实现了一个针对CNVD（中国国家信息安全漏洞库）的爬虫，用于抓取特定类型和时间范围内的漏洞信息。通过多线程处理，爬虫首先获取漏洞列表，然后详细解析每个漏洞的页面，提取关键信息如漏洞标题、危害级别等，并将结果存储为DataFrame。此外，还提供了XML文件的解析功能，将XML数据转换为DataFrame。

本文介绍使用pyspider框架爬取CNNVD网站漏洞信息的方法，包括爬虫的实现细节和代码分享，适合对网络安全和数据抓取感兴趣的技术人员。

本文介绍了解决在Java项目中因未安装TestNG框架导致的导入错误问题，提供了详细的安装步骤，包括通过Eclipse的软件安装功能添加TestNG源并完成安装。

本文系统阐述基于CNVD漏洞公告开展高价值漏洞线索挖掘的方法论，涵盖从信息收集、深度关联分析、漏洞验证到报告提交的完整流程。重点介绍20个实战技巧，包括精准关键词订阅、影响版本边界测试、补丁代码审计、产品源码对比、依赖链传导分析、CORS等边缘配置漏洞挖掘、PoC自研、CVSS量化评估及标准化报告撰写等，强调主动式漏洞思维与合法合规实践。

51,408

社区成员

86,098

社区内容

发帖

与我相关

我的任务

javaspring bootspring cloud 技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章