Python爬取网页时显示故障

一只懒得睁眼的猫

博客专家认证

2017-12-12 07:03:46

{'code': 20000, 'message': '调用 PM 失败！错误代码：400, 错误信息：Bad Request: This case is assigned to another user'}

...全文

378 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

一只懒得睁眼的猫 2017-12-12

打赏
举报

回复

使用了知识图谱，自然语言处理和卷积神经网络等技术，基于python语言，设计了一个数控领域故障诊断专家系统。本项目是第八届中国软件杯大赛，基于移动端在线设备故障诊断平台的参赛作品。[比赛题目链接](http://www.cnsoftbei.com/plus/view.php?aid=353)\ 该项目要求从网络上爬取相关设备故障和维修解决方式，并构建知识库，当设备出现故障时，用户通过输入数控机床相关参数（品牌、型号、故障代码、某个或多个超出阈值参数、故障描述(文字或语音)等），系统可以根据知识库来进行故障诊断和排除，如果没有满意的方案，系统会再次进行网络爬取，如果答案有效，则对知识库进行补充和优化。\ 设计系统时，主要的数据来源是《实用数控机床故障诊断及维修技术500例》这个PDF文档，我们尝试着对文档里的每一条故障描述进行拆解和分类（CNN），构建出了5中三元式推理规则，分别为：故障现象和故障现象之间存在并发症，故障前执行的操作间接导致的故障现象，某故障原因导致的故障现象，报警信息伴随的故障现象，故障部位常见的故障现象。使用Neo4j图数据库存储。

【资源说明】 1.项目代码均经过功能验证ok，确保稳定可靠运行。欢迎下载食用体验！ 2.主要针对各个计算机相关专业，包括计算机科学、信息安全、数据科学与大数据技术、人工智能、通信、物联网等领域的在校学生、专业教师、企业员工。 3.项目具有丰富的拓展空间，不仅可作为入门进阶，也可直接作为毕设、课程设计、大作业、初期项目立项演示等用途。 4.当然也鼓励大家基于此进行二次开发。在使用过程中，如有问题或建议，请及时沟通。 5.期待你能在项目中找到乐趣和灵感，也欢迎你的分享和反馈！【项目介绍】基于知识图谱神经网络技术的数控领域故障诊断专家系统python源码+项目说明+数据库sql(含前端+后端).zip 设计思路系统的核心是围绕着构建知识库，通过拆分，将故障描述信息拆分成短文本的知识，构建关联关系。在使用过程中通过用户反馈，不断完善知识库的精度和广度。\ 首先，我们爬取了大量数控机床维修案例，使用NLP自然语言处理技术对文本做了噪声移除和句法分析，然后使用CNN卷积神经网络识别出了故障描述中用户所做的操作和出现的故障现象，结合词性标注，正则表达式处理等技术，最终提取出了故障描述中，对机床执行的操作，故障的现象，故障的部位，存在的报警信号。\ 基于Neo4j图数据库能够清晰的表示数据模型的优点，我们经过上面对故障描述的拆分和标注，表示出了做了什么操作会引起了什么故障现象，故障现象之间的并发或间接导致的关联关系，一个故障原因会间接或直接导致哪些故障现象的发生，机床的某个部位会出现的故障现象，报警代码和故障现象之间的关联，构成了知识图谱，使用基于规则的推理模型实现了我们的推理算法。\ 当一个新的故障发生时，通过分析，如果现有的知识不能解决新的故障，这时通过在线分析，爬取解决方案，通过用户人为反馈和语料库对比分析程序，确认结果可靠之后，分析当前的故障描述，原理同上述构建知识库的过程，拆分之后，对新的知识进行补充，对已经存在的知识，进一步完善和优化，最终实现知识库的自学习功能。\ 在故障诊断的过程中，类似上述的处理方法，分析故障描述，通过分析故障部位，出现的现象，所做的操作，结合知识图谱，分析出导致这些现象出现的最可能的故障原因，设置权值，然后通过CNN卷积神经网络对故障现象进行预测，对诊断出的故障结果的权值进行微调，排序之后展示给用户。

通过不到1小时的时间帮助学员快速熟悉Python爬虫从入门到案例实战。从零开始敲代码，手把手带领大家感受从无到有的全过程。讲师是以企业里Python程序员的角度出发，换位思考以非常有效、高效的方式对接工作中可能涉及到各类角色，比如产品经理和运营人员等。主要包含：http请求、正则表达式和json、开源分词工具和简单的Web服务等。

股票行情实时数据接口-A股,完全免费的沪深证券股票数据-中国股市,python最简封装的API接口,包含日线,历史K线,分时线,分钟线,全部实时采集，系统包括新浪腾讯双数据核心采集获取，自动故障切换，STOCK数据格式成DataFrame格式,可用来查询研究量化分析，股票程序自动化交易系统.为量化研究者在数据获取方面极大地减轻工作量，更加专注于策略和模型的研究与实现。

介绍企业舆情监控系统是一个用于实时监测和分析企业相关舆情的系统。企业舆情监控系统能够帮助企业实时了解和分析与其相关的舆情信息，提供决策支持和风险预警，以便企业能够及时应对舆情事件，保护企业声誉和利益。主要模块网络爬虫：系统通过使用网络爬虫技术，从微博门户、腾讯新闻等平台上爬取与企业相关的信息。数据存储：爬取到的数据通过存储在数据库中，以便后续的处理和分析。日志生成与存储：系统生成爬取日志，并将日志存储在Hadoop分布式文件系统（HDFS）中，用于后续的数据追踪和故障排查。数据清洗与NLP：对爬取到的数据进行清洗和处理，使用自然语言处理（NLP）技术进行关键词提取、情感分析等操作，以获取更有价值的信息。大屏展示：系统提供一个大屏展示页面，实时展示舆情数据的统计结果和趋势分析，帮助企业了解舆情形势。管理后台：管理员可以通过管理后台指定关键词进行爬取，并实时查看爬取结果。智能搜索：系统提供智能搜索功能，用户可以通过关键词搜索舆情数据，快速定位感兴趣的信息。 Elasticsearch：系统使用Elasticsearch作为搜索和分析引擎，支持快速的全文搜

52,797

社区成员

25,305

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章