社区
Java EE
帖子详情
取数据效率疑问
zx870811130
2013-07-11 11:56:55
AB两个数据表 表结构一样 表名不一样
现用JDBC取数据,怎么取数据消耗少,而且比较快。目前有两个方法:
1.先取A表,再取B表,放到同一集合,这个做法要两次连接数据库。
2.把AB两个表合成一个表 一次连接查询。
注:两个表的数据都有500W左右。如果大神们有更好的方法麻烦分享分享!谢谢~
...全文
92
2
打赏
收藏
取数据效率疑问
AB两个数据表 表结构一样 表名不一样 现用JDBC取数据,怎么取数据消耗少,而且比较快。目前有两个方法: 1.先取A表,再取B表,放到同一集合,这个做法要两次连接数据库。 2.把AB两个表合成一个表 一次连接查询。 注:两个表的数据都有500W左右。如果大神们有更好的方法麻烦分享分享!谢谢~
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
2 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
zx870811130
2013-07-18
打赏
举报
回复
加索引确实有效
oh_Maxy
2013-07-12
打赏
举报
回复
大数据量,都想着分表,方案2不好。 如果用唯一索引或者主键查询,速度还是很快的。
向list中添加批量
数据
然后拿出来每5条执行
在开发中见到一种业务场景,大批量的执行
数据
会非常耗时,有一种策略就是分批次处理,每次处理一定的
数据
量,这样会提升处理
数据
的
效率
,下面的是我写的代码,上面都写了注释,如有
疑问
或者更好的思路,建议,请写道评论中,thankyou 这是我写的单元测试,代码可以直接用 @Test public void testtheam() { //向list中添加
数据
,用于后面的测试 List list = new ArrayList<>(); for (int i = 1; i < 17; i
【
数据
治理】
数据
元、元
数据
、主
数据
、参考
数据
概述
【
数据
治理】
数据
元、元
数据
、主
数据
、参考
数据
概述
数据
元 什么是
数据
元: 《GB/T 19488.1 电子政务
数据
元第1部分:设计和管理规范》 里是这样定义的:
数据
元(Data element):又称
数据
类型,通过定义、标识、表示以及允许值等一系列属性描述的
数据
单元。在特定的语义环境中被认为是不可再分的最小
数据
单元。 举例说明: 语义环境:描述员工年龄的大小 age为
数据
元,“18“为
数据
元的值。
数据
元一般来说由三部分组成: 对象类:思想、概念或真实世界中的事物的集合,它们具有清晰的边界和含义
数据
仓库理论知识
通常
数据
仓库的
数据
来自各个业务应用系统。业务系统中的
数据
形式多种多样,可能是 Oracle、MySQL、SQL Server 等关系
数据
库里的结构化
数据
,可能是文本、CSV 等平面文件或 Word、Excel 文档中的
数据
,还可能是 HTML、XML 等自描 述的半结构化
数据
。这些业务
数据
经过一系列的
数据
抽
取
、转换、清洗,最终以一种统一的格式装载进
数据
仓库。
数据
仓库里的
数据
作为分析用的
数据
源,提供给后面的即席查询、 分析系统、
数据
集市、报表系统、
数据
挖掘系统等。这时我们就想了,为什么不能把业务系统的
数据
直接
数据
库,
数据
仓库,
数据
集市,
数据
湖,
数据
中台
数据
库,
数据
仓库,
数据
集市,
数据
湖,
数据
中台 转载声明 本文大量内容系转载自以下文章,有删改,并参考其他文档资料加入了一些内容:
数据
仓库和
数据
集市的区别 作者:修鹏李 出处:CSDN 大
数据
:
数据
仓库和
数据
库的区别 作者:南宫蓉 出处:简书 第一篇:
数据
仓库概述 第二篇:
数据
库关系建模 作者:穆晨 出处:CNBLOS
数据
仓库、
数据
湖、
数据
集市、和
数据
中台的故事 作者:Murkey学习之旅 出处:csdn
数据
中台和数仓的关系
HBase之读
取
数据
流程
说明 本文参考自 HBase
数据
读
取
流程解析 hbase(二)hfile结构 目录 说明 1.HBase读
取
数据
流程 2.
疑问
2.1上述(10)中,需要对满足条件的KeyValue进行从小到大排序合并构建最小堆。 2.1.1为什么Scanner需要有小到大排序? 2.1.2HBase中KeyValue是什么样的结构? 2.1.3不同KeyValue之间如何进行大小比较......
Java EE
67,513
社区成员
225,879
社区内容
发帖
与我相关
我的任务
Java EE
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
复制链接
扫一扫
分享
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章