Mybatis批量插入数据,三万条数据左右卡死,求教

qq_21132973 2017-10-30 03:33:17
用的是sqlSessionFactory.openSession(ExecutorType.Batch,false)获得session,每1000条数据手动提交一次。
...全文
1953 5 打赏 收藏 转发到动态 举报
写回复
用AI写文章
5 条回复
切换为时间正序
请发表友善的回复…
发表回复
能先森 2020-01-13
  • 打赏
  • 举报
回复
如果是mysql数据库,一般是mysql的max_allowed_packet传送数据包的大小限定了,你传过去的3万条数据,已经超出上限 show variables like '%max_allowed_packet%' 查看你数据库的参数大小 ,默认是1MB,你可以重新设定,mysql8以后最大支持1024MB
Enchanter, 2017-10-31
  • 打赏
  • 举报
回复
批量提交的时候,需要手动去清除数据缓存,不然数据缓存会堆积,估计你的数据内容的量应该不小,又没有去清除数据缓存,所以才导致了这样的问题
  • 打赏
  • 举报
回复
还有就是 数据库端 会有一些 缓存的参数设置,加大参数,总之这个需要你们 DBA 协助一下。
  • 打赏
  • 举报
回复
用的什么数据库? 表结构是什么样的? 有没有索引,有没有外键? 数据库端查一下是否有死锁? 把外键去掉,减少锁等待。。。
tianfang 2017-10-30
  • 打赏
  • 举报
回复
查查数据库性能
标题基于Python的汽车之家网站舆情分析系统研究AI更换标题第1章引言阐述汽车之家网站舆情分析的研究背景、意义、国内外研究现状、论文方法及创新点。1.1研究背景与意义说明汽车之家网站舆情分析对汽车行业及消费者的重要性。1.2国内外研究现状概述国内外在汽车舆情分析领域的研究进展与成果。1.3论文方法及创新点介绍本文采用的研究方法及相较于前人的创新之处。第2章相关理论总结和评述舆情分析、Python编程及网络爬虫相关理论。2.1舆情分析理论阐述舆情分析的基本概念、流程及关键技术。2.2Python编程基础介绍Python语言特点及其在数据分析中的应用。2.3网络爬虫技术说明网络爬虫的原理及在舆情数据收集中的应用。第3章系统设计详细描述基于Python的汽车之家网站舆情分析系统的设计方案。3.1系统架构设计给出系统的整体架构,包括数据收集、处理、分析及展示模块。3.2数据收集模块设计介绍如何利用网络爬虫技术收集汽车之家网站的舆情数据。3.3数据处理与分析模块设计阐述数据处理流程及舆情分析算法的选择与实现。第4章系统实现与测试介绍系统的实现过程及测试方法,确保系统稳定可靠。4.1系统实现环境列出系统实现所需的软件、硬件环境及开发工具。4.2系统实现过程详细描述系统各模块的实现步骤及代码实现细节。4.3系统测试方法介绍系统测试的方法、测试用例及测试结果分析。第5章研究结果与分析呈现系统运行结果,分析舆情数据,提出见解。5.1舆情数据可视化展示通过图表等形式展示舆情数据的分布、趋势等特征。5.2舆情分析结果解读对舆情分析结果进行解读,提出对汽车行业的见解。5.3对比方法分析将本系统与其他舆情分析系统进行对比,分析优劣。第6章结论与展望总结研究成果,提出未来研究方向。6.1研究结论概括本文的主要研究成果及对汽车之家网站舆情分析的贡献。6.2展望指出系统存在的不足及未来改进方向,展望舆情

67,542

社区成员

发帖
与我相关
我的任务
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
社区管理员
  • Java EE
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧