社区
Oracle
帖子详情
mysql大数据怎么处理
xpphh
2014-05-16 03:30:13
因为项目需求,需要每天往一张表里插入大量的监控数据(每天500W条--2000W条之间),这些数据会有条件查询的操作(条件大于四条),我应该怎么做?
...全文
389
7
打赏
收藏
mysql大数据怎么处理
因为项目需求,需要每天往一张表里插入大量的监控数据(每天500W条--2000W条之间),这些数据会有条件查询的操作(条件大于四条),我应该怎么做?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
7 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
xpphh
2014-06-06
打赏
举报
回复
分区表很早就建好了,可是我考虑的是,这个数据量还是略大。
xpphh
2014-06-06
打赏
举报
回复
项目用户量 大概在 40W左右,每个用户每天大概会在单表产生 20--80条监控数据记录。
空心兜兜
2014-05-19
打赏
举报
回复
这样的建议分开存
ithaibo
2014-05-19
打赏
举报
回复
不差钱的可以考虑使用主从服务器,将mysql实施负载均衡。具体技术,去找找案例文档吧
c_sdn_shang_bu_qi
2014-05-19
打赏
举报
回复
我以前公司的系统(短信平台)类似于你这种情况 分365个表 年--月--日 当月当天的信息存入当天的表 第二年的话不区分。 依次类推 这个提供参考。 另外你们mysql数据量这么大,只分表应该还不行。 要在搞个负载均衡,读写分离之类的 我现在公司的也是,搞主从,主机只许写入,从机只读。
什么都不能
2014-05-18
打赏
举报
回复
监控数据不是都用实时数据库吗?
yufengdxw
2014-05-16
打赏
举报
回复
尝试 分表分库
JDBC使用
MySQL
处理
大数据
+事务控制管理.txt
JDBC使用
MySQL
处理
大数据
+事务控制管理.txt
javaweb学习总结——使用JDBC
处理
MySQL
大数据
本篇文章主要介绍了JDBC
处理
MySQL
大数据
,有时是需要用程序把大文本或二进制数据直接保存到数据库中进行储存的,非常具有实用价值,需要的朋友可以参考下。
大数据
简历项目 关于两个联通
大数据
项目和一个爬虫项目
大数据
简历 内含三个项目: 项目一:联通
大数据
项目 项目名称: 移动终端上网数据实时分析
处理
系统; 开发环境: IDEA+eclipse+maven+jdk 系统架构: hadoop+zookeeper+flume+Spark+hive+
mysql
+sqoop+Oracle 项目二:联通
大数据
项目 项目名称: 信令数据实时分析
处理
系统; 开发环境: IDEA+eclipse+maven+jdk 系统架构: hadoop+zookeeper+Spark+hive+
mysql
+sqoop+Oracle 项目三:网络爬虫 项目名称: 爬取电商网站商品信息 开发环境: eclipse+
mysql
+maven+jdk+svn 系统架构: hadoop+zookeeper+httpclient+htmlcleaner+hbase+redis+solr+flume+kafka+storm
大数据
表的分表
处理
设计思想和实现(
MySQL
)
在
MySQL
中,当一张表的数据过大的时候,操作速度会变慢,而且给维护带来麻烦,分表设计的思想正好解决了这一问题。
hadoop
大数据
课程设计
hadoop
大数据
课程设计,爬虫项目,python
Oracle
17,078
社区成员
55,233
社区内容
发帖
与我相关
我的任务
Oracle
Oracle开发相关技术讨论
复制链接
扫一扫
分享
社区描述
Oracle开发相关技术讨论
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章