求大虎大牛来解决关于C#大批量数据插入MySQL数据库的问题

wersdfadaf 2012-02-29 10:37:36
不能用insert ……values()()()这种拼接。有好办法没?注意不是sqlserver,没有SqlBulkCopy的。怎么解决?
...全文
324 17 打赏 收藏 转发到动态 举报
写回复
用AI写文章
17 条回复
切换为时间正序
请发表友善的回复…
发表回复
tanyu168 2012-08-17
  • 打赏
  • 举报
回复
楼主能详细点不。。。
ijwsoft 2012-02-29
  • 打赏
  • 举报
回复
你可以分割成每1000条数据提交一次
这个是sqlite数据库批量插入的解决方案,你参考思路吧:
http://www.cnblogs.com/chendaoyin/archive/2012/01/12/2320880.html
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
adapter.update()无效,还是在用Insert插入,时间不会提高。
huoyanshan 2012-02-29
  • 打赏
  • 举报
回复
你上网找下关于Adapter.Update()方法,肯定有效。
文明游戏 2012-02-29
  • 打赏
  • 举报
回复
可以自己设定打他datatable长度来控制每次提交多少
文明游戏 2012-02-29
  • 打赏
  • 举报
回复
lz楼上自己说的方法挺对的啊,就是把需要插入的内容放到一个datatable里,再执行存储过程啊,这样应该很快的
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
难道说只能先存在一张datatable里面,然后用存储过程insert into *** select * from @tablename了?
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
在sqlserver中直接用sqlbulkcopy就行,关键现在是mysql数据库。。。
Ny-6000 2012-02-29
  • 打赏
  • 举报
回复
不用接接,循环调用存储过程了

如果在sql中的话。
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
数据表中有个字段估计能有几千位的长度,弄不了几条就超过sql语句长度的上限了。。。
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
谢谢,但是我一行记录的数据就很长很长,没法用这样的拼接。
muyi66 2012-02-29
  • 打赏
  • 举报
回复
速度不行你要首先找到速度不行的原因。要是因为服务器太慢,那谁也没办法让你快起来。
快乐大法师 2012-02-29
  • 打赏
  • 举报
回复


public bool Add(List<img_entry_one> list)
{
StringBuilder strSql = new StringBuilder();
strSql.Append("insert into img_entry_one(");
strSql.Append("IMG_ID,FOLDER_ID,STATU_ID,WORK_TIME,START_TIME,END_TIME,OUTPUT_STATUS,INPUT_DATA)");
strSql.Append("values");
for (int i = 0; i < list.Count; i++)
{
if ((i == 0 || i % 500 == 1) && i != 1)
{
strSql.Append("(" + "'" + list[i].IMG_ID + "'");
strSql.Append("," + "'" + list[i].FOLDER_ID + "'");
//strSql.Append("," + "'" + list[i].USER_ID + "'");
strSql.Append("," + "'" + list[i].STATU_ID + "'");
strSql.Append("," + "'" + list[i].WORK_TIME + "'");
strSql.Append("," + "'" + list[i].START_TIME + "'");
strSql.Append("," + "'" + list[i].END_TIME + "'");
strSql.Append("," + "'" + list[i].OUTPUT_STATUS + "'");
strSql.Append("," + "'" + list[i].INPUT_DATA + "'" + ")");
}
else
{
strSql.Append(",(" + "'" + list[i].IMG_ID + "'");
strSql.Append("," + "'" + list[i].FOLDER_ID + "'");
//strSql.Append("," + "'" + list[i].USER_ID + "'");
strSql.Append("," + "'" + list[i].STATU_ID + "'");
strSql.Append("," + "'" + list[i].WORK_TIME + "'");
strSql.Append("," + "'" + list[i].START_TIME + "'");
strSql.Append("," + "'" + list[i].END_TIME + "'");
strSql.Append("," + "'" + list[i].OUTPUT_STATUS + "'");
strSql.Append("," + "'" + list[i].INPUT_DATA + "'" + ")");
}
if (i % 500 == 0 && i != 0)
{
strSql.Append(";");
int rows = DbHelperMySQL.ExecuteSql(strSql.ToString());
if (i == list.Count - 1)
{
return true;
}
strSql = new StringBuilder();
strSql.Append("insert into img_entry_one(");
strSql.Append("IMG_ID,FOLDER_ID,STATU_ID,WORK_TIME,START_TIME,END_TIME,OUTPUT_STATUS,INPUT_DATA)");
strSql.Append("values");
}
else if (i == list.Count - 1)
{
strSql.Append(";");
int rows = DbHelperMySQL.ExecuteSql(strSql.ToString());
return true;
}
}
return false;
}


500条一提交 感觉这样也挺快 不知道还有什么其它好办法
No4000 2012-02-29
  • 打赏
  • 举报
回复
你看数据库插入记录是不是一条接着一条的?就算是多条也是经过多条insert操作

即使数据库表的记录复制到另一个表,其工作原理还是一个样

所以你可以这样写

string sql = "";
foreach(Row row in list){
sql += "insert ... values(...);";
}

//最后执行cmd
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
用MySqlAdapter速度一样不行啊.
wersdfadaf 2012-02-29
  • 打赏
  • 举报
回复
呵呵,有前辈帮我解决了。将表的引擎设为myisam即可。
内容概要:本文围绕基于三重移相控制(TPS)的双有源桥(DAB)高频隔离DC-DC变换器开展系统性研究,重点构建了其在Simulink环境下的高精度仿真模型。研究全面涵盖SPS单相移相、DPS双重重移相与TPS三重移相等多种控制策略的建模、实现与性能对比,深入分析不同模式下变换器的功率传输特性、软开关实现条件及功率回流问题,旨在提升DAB在交直流混合微电网、能量路由器、多端口柔性互联装置等场景中的转换效率与动态响应能力。通过对ZVS(零电压切换)条件的精确控制与移相角参数的优化,有效降低了开关损耗,增强了系统整体能效与运行稳定性。该仿真模型具有良好的可扩展性,适用于复杂电能转换系统的科研验证与工程开发。; 适合人群:电力电子、电气工程及其自动化等相关专业的硕士研究生、博士生、科研人员以及从事新能源变换器、柔性输配电系统设计的工程技术人员。; 使用场景及目标:①掌握双有源桥DAB变换器的基本工作原理及其在高频隔离场合的核心优势;②深入理解三重移相控制策略的设计机理、控制自由度分配及其在效率优化中的关键作用;③构建并调试可用于科研论文撰写、项目申报或实际系统验证的高保真Simulink仿真模型,支撑理论分析与实验对比。; 阅读建议:建议结合MATLAB/Simulink平台进行动手实践,重点关注主电路拓扑搭建、移相控制模块设计、驱动信号时序配置及ZVS实现条件的仿真观测,推荐通过对比SPS、DPS与TPS三种模式的稳态与动态响应曲线,深入掌握各控制策略的适用边界与优化方向。
【重要提示】本资源设置为0积分下载,若非0积分请勿轻易下载 亲爱的CSDN用户: 首先感谢你点进这个资源页面。我需要提前说明一个重要情况: 本资源原本已设置为“0积分下载”,即作者希望完全免费共享。但CSDN平台有时会根据文件的下载热度、文件大小、用户权限等因素,自动将部分资源的积分调整为非0数值(如1积分、2积分、5积分等)。这是平台系统的自动行为,而非作者本人的设定。 因此,如果你当前看到该资源的下载所需积分不是0(例如显示为1、2、3……),请谨慎决定是否下载。 如果你按照非0积分支付并下载后发现资源内容不符合预期、链接失效,或者实际上该资源本应是免费的,作者无法为此承担积分损失或退还操作。强烈建议:仅在页面显示为0积分时进行下载。 另外,本资源描述中并未直接提供具体的下载地址或外部链接,因为它本身是一个通过CSDN官方上传通道提交的文件/内容包。如果你看到描述中没有外部网盘地址,这是正常的——资源文件应通过CSDN内置的“下载”按钮获取。若因平台积分显示异常导致你支付了积分,请优先联系CSDN客服咨询积分退还政策,作者没有权限修改平台自动设定的积分值。 感谢你的理解与支持。技术分享本应开放,但受限于平台规则,特此提醒如上。祝学习进步!

111,131

社区成员

发帖
与我相关
我的任务
社区描述
.NET技术 C#
社区管理员
  • C#
  • Creator Browser
  • by_封爱
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

让您成为最强悍的C#开发者

试试用AI创作助手写篇文章吧