社区
Java EE
帖子详情
你操作的数据量有多大?
kala197
2010-07-21 04:04:18
你操作的数据量有多大?
经常有人问你操作的数据量最大是多大?
怎么操作?
额 都不知道什么样的数据 才算大数据
...全文
109
12
打赏
收藏
你操作的数据量有多大?
你操作的数据量有多大? 经常有人问你操作的数据量最大是多大? 怎么操作? 额 都不知道什么样的数据 才算大数据
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
12 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
wqkjj
2010-07-22
打赏
举报
回复
[Quote=引用 10 楼 kala197 的回复:]
额 面试的时候有人问 你操作的数据量 最大是多少? 怎么操作? 注意哪些方面?
怎么回答
[/Quote]
这个无非是想了解LZ对数据库方面的处理经验,不外乎:
(0)系统资源方面(物理内存、交换区、磁盘空间、带宽、系统文件/原始设备、文件IO)
(1)DB配置相关(比如全局内存、回滚段、临时表空间、锁等等)
(2)DB实体对象相关(索引、约束、分区表、物理分表等等)
(3)应用处理方面:数据内存缓存之类
..........
好象应该差不多了。其中0基本属于加分部分,(1)(2)(3)属于DB的基础部分。
kala197
2010-07-22
打赏
举报
回复
额 面试的时候有人问 你操作的数据量 最大是多少? 怎么操作? 注意哪些方面?
怎么回答
kala197
2010-07-22
打赏
举报
回复
额 学习了 呵呵 还有其他的没
wqkjj
2010-07-21
打赏
举报
回复
所谓大和小应该是个相对概念,和机器的计算能力相关吧。
相对于一般PC,几十万就算大了
相对于服务器(比如RS6000之类),上百万级算大了
相对于主机(比如OS390),上千万算大
相对于超级计算机,不知道,没接触过。
lizhongyi188
2010-07-21
打赏
举报
回复
腾讯的应该最多了!
火龙果被占用了
2010-07-21
打赏
举报
回复
[Quote=引用 1 楼 zliu789 的回复:]
日增百万的一张表 可以算吧 比如CSDN的用户登陆信息。
[/Quote]
CSDN 的用户登录信息一天也没有 100 万!
kala197
2010-07-21
打赏
举报
回复
你们操作的数据 最大多大 见识下 没概念 还有就是这么 处理这么大的数据操作
Jlins
2010-07-21
打赏
举报
回复
一天千万条话单...这就是大数据量
cheng20100915
2010-07-21
打赏
举报
回复
比如游戏登录信息,这信息够大吧,每秒都几万条呢
luozhangwen
2010-07-21
打赏
举报
回复
移动用户数据够大吧..
1000万以上都算大数据了.
kala197
2010-07-21
打赏
举报
回复
额 够大
老黄瓜_
2010-07-21
打赏
举报
回复
日增百万的一张表 可以算吧 比如CSDN的用户登陆信息。
Oracle数据库 大事务的数据更改对数据库内部的影响
本课程以Oracle 10g数据库为基础,来讲解大事务的数据更改在数据库内部是如何处理的。 当用户执行一条SQL对数据库进行更改
操作
的时候,我们知道数据是从磁盘读取到内存中进行更改
操作
的,那么当这个SQL执行时间很长,而且修改
数据量
非常大,由于内存容量大小的原因,可能在事务没有commit提交的情况下,一些脏数据已经写回到了磁盘中。那么在这种情况下,当用户执行commit提交
操作
,数据库是如何处理这些已经写到磁盘的脏数据块的? 本课程就以实验的方式得出数据,来验证以上所提出的问题。
【精讲】大数据分析入门
课程设计采取数据分析全链路处理流程化的设计模式,带领学员场景化还原真实业务分析,而培养具有数据分析方法论、数据思维和采用数据驱动业务为核心思想的实战人才。从数据分析的岗位需求出发,从轻量级数据分析,大数据分析多角度夯实基础理论知识,让学员在预科期间就可以提前掌握实用技能。通过大数据分析入门精讲,实现数据分析师编程语言入门,并能够独立完成网络数据爬取,掌握数据分析师数据采集能力;灵活
操作
大数据分析必备
操作
系统,让学员入门无障碍,快速提升。
ClickHouse大数据分析技术与实战
ClickHouse是一个用于OLAP的数据分析引擎,由俄罗斯搜索巨头Yandex公司开源。1、可支持PB级超大容量的数据库管理系统。2、基于SQL语句, 使用成本低。 3、超亿级
数据量
分析的秒级响应,计算性能横向扩展。4、海量数据即查即用。5、提供数据的预聚合能力,进一步提升数据查询的效率。6、列式存储, 数据压缩,降低磁盘IO和网络IO,提升计算性能,节约70%物理存储。7、支持副本, 实现跨机房的数据容灾。课程基于ClickHouse的**的20.x版本,从理论到实践,由浅入深详解ClickHouse的原理和使用。1. 本课程从零开始,有Linux
操作
系统和SQL使用经验即可。2. 课程以案例驱动,包含大量的实践案例。3. 将ClickHouse与MySQL、Kafka、HDFS等第三方系统集成,增强ClickHouse的功能。4. 课程覆盖面广,既有基础功能的详细讲解, 也包含了集群部署、查询优化、运维管理等高级内容。
Python数据分析三剑客
Python 数据分析三剑客 numpy / pandas / matplotlib numpy 软件包是 Python 生态系统中数据分析、机器学习和科学计算的主力军。它极大地简化了向量和矩阵的
操作
处理。pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型,提供了高效地
操作
大型数据集所需的工具。matplotlib就是Python绘图库中的佼佼者,它包含了大量的工具,你可以使用这些工具创建各种图形(包括散点图、折线图、直方图、饼图、雷达图等),Python科学计算社区也经常使用它来完成数据可视化的工作。
用Python中的Pandas处理数据
内容介绍1.大量练习Series数据结构的基础
操作
。 2.大量练习DataFrame数据结构的基础
操作
。 3.将工作中的数据分析工作用Pandas做分析测试。 章节介绍第1章 讲解Pandas中Series数据的各种基本
操作
,为后面顺利做数据分析打基础。第2章 讲解Pandas中DataFrame数据的各种基本
操作
,为后面顺利做数据分析打基础。第3章 对Series和DataFrame的索引进一步做详细讲解。这些都是能学习Pandas数据处理的重要基础。第4章 如果快速实现对数据的各分析
操作
,快速得到想要的报表。
Java EE
67,513
社区成员
225,879
社区内容
发帖
与我相关
我的任务
Java EE
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
复制链接
扫一扫
分享
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章