社区
ASP
帖子详情
数据在入库前的处理问题
qfljm
2005-12-25 08:38:49
问个基础问题
数据除了字符串(String)在入库时要在用单引号(')在两边括起来,
其它还有什么类型的数据需要处理?
...全文
34
回复
打赏
收藏
数据在入库前的处理问题
问个基础问题 数据除了字符串(String)在入库时要在用单引号(')在两边括起来, 其它还有什么类型的数据需要处理?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
大量
数据
入库
处理
经验总结
最近做一些
数据
入库
的服务，这里做些经验总结： 【获取
入库
平均速度】 获取要部署环境的
入库
平均速度（跟具体环境配置如网络带宽、服务器硬件条件有关）一般都是经验值或者需要经过测试。 【确定需要
数据
库数量】 根据实际需求确定需要几个
数据
库同时
入库
，预计70%。这个可能造成查询的时候需要分库查询，然后结果总汇。 【
入库
服务需要提供
数据
存储能力】
入库
服务获取
数据
后需要对
数据
进行存储，然后再
处理
数
对于大量
数据
存储
入库
问题
的解决办法
在开发过程中，有时可能会遇到这种情况，当主线程中开启了N个子线程，而每个子线程中运算分析结果的
数据
量特别的大，如果对于这样的大批量
数据
在子线程中进行
入库
，那么会造成大量的连接资源浪费，同时会造成
数据
库阻塞影响程序执行效率。这时候解决方案有两个： 将子线程中的
数据
统一用主线程接收，在主线程中进行
入库
操作。 但是这种方案争对执行完成后，
数据
量较小的情况，不会造成内存溢出的情况下，如果在
数据
量非常庞大...
java高并发下
数据
入库
java高并发下
数据
批量
入库
该服务利用线程池并结合缓存类来
处理
高并发下
数据
入库
问题
，做到实时
数据
存入redis和
数据
批量
入库
，使用的时候需要修改为自己的业务
数据
，该服务暂时适合下面两种情况： 1、达到设置的超时时间。 2、达到最大批次。 package io.renren.service.impl; import com.alibaba.fastjson.JSON; import com.alibaba.fastjson.JSONArray; import lombok.extern.slf4j.Slf
Api
数据
自动
入库
目
前
我们需要将各渠道的
数据
进行
入库
然后进行分析，当
前
api 返回的
数据
都是通过定制化代码开发来解析、建表、
数据
入库
的。这种方式可复用性不高，因为每种渠道提供的接口
数据
格式是不一样的，每次都需要去修改代码，不能做到零代码通用方案
入库
。所以我们需要一个可以自动来根据 api 返回的 json
数据
格式，来完成建表、自动
入库
的一种通用方案。......
php
处理
大批量
数据
,php大量
数据
入库
怎么
处理
有业务需求需要一次性循环n条
数据
,插入或更新
数据
库时,如果单纯的循环,插入/更新,会消耗太多的
数据
库资源以下是一种简单的解决方案
数据
库的insert是可以批量更新的，当有大量
数据
循环insert时，可以将
数据
先保留不执行插入命令，到最后一条时一次性插入，例如tp的addAll()方法； (推荐学习：PHP视频教程)
数据
库的update 如果使用case when 的话，也是可以批量更新的。本文主...
ASP
28,391
社区成员
357,060
社区内容
发帖
与我相关
我的任务
ASP
ASP即Active Server Pages，是Microsoft公司开发的服务器端脚本环境。
复制链接
扫一扫
分享
社区描述
ASP即Active Server Pages，是Microsoft公司开发的服务器端脚本环境。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章
发帖
与我相关
我的任务
分享
