社区
应用实例
帖子详情
求助,海量数据查询分析
gloryict
2011-10-12 09:32:45
一个数据查询分析的项目
数据量最多上亿,单表结构简单,就单个表
B/S,.NET开发,sqlserver2005
web2.0
客户端最多50,并发数一般在10个以下
有些查询,数据分析的功能
希望有海量电信数据查询分析经验的高手能介绍经验。
项目也可以外包出来,
...全文
76
6
打赏
收藏
求助,海量数据查询分析
一个数据查询分析的项目 数据量最多上亿,单表结构简单,就单个表 B/S,.NET开发,sqlserver2005 web2.0 客户端最多50,并发数一般在10个以下 有些查询,数据分析的功能 希望有海量电信数据查询分析经验的高手能介绍经验。 项目也可以外包出来,
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
6 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
yidichaxiang
2011-10-13
打赏
举报
回复
分区表,缓存,多线程,?关注
唐诗三百首
2011-10-13
打赏
举报
回复
楼主可以了解一下数据仓库及SSAS工具.
火才松
2011-10-13
打赏
举报
回复
分区表应该就够了,选好分区索引。只做数据分析的话,库里只有一个表的话,设定为只读库。
也可以了解一下OLAP相关的针对性的处理。
youqi1984
2011-10-12
打赏
举报
回复
数据量较大。定义存储过程。晚上会话少开始执行任务。把数据分析结果保存在单表。
haitao
2011-10-12
打赏
举报
回复
分区表
中间结果表
高性能高并发服务器架构大全
整理的高性能高并发服务器架构文章,内容预览: 初创网站与开源软件 6 谈谈大型高负载网站服务器的优化心得! 8 Lighttpd+Squid+Apache搭建高效率Web服务器 9 浏览量比较大的网站应该从哪几个方面入手? 17 用负载均衡技术建设高负载站点 20 大型网站的架构设计问题 25 开源平台的高并发集群思考 26 大型、高负载网站架构和应用初探 时间:30-45分钟 27 说说大型高并发高负载网站的系统架构 28 mixi技术架构 51 mixi.jp:使用开源软件搭建的可扩展SNS网站 51 总概关键点: 51 1,Mysql 切分,采用Innodb运行 52 2,动态Cache 服务器 -- 52 美国Facebok.com,中国Yeejee.com,日本mixi.jp均采用开源分布式缓存服务器Memcache 52 3,图片缓存和加 52 memcached+squid+apache deflate解决网站大访问量问题 52 FeedBurner:基于MySQL和JAVA的可扩展Web应用 53 YouTube 的架构扩展 55 了解一下 Technorati 的后台
数据
库架构 57 Myspace架构历程 58 eBay 的
数据
量 64 eBay 的应用服务器规模 67 eBay 的
数据
库分布扩展架构 68 从LiveJournal后台发展看大规模网站性能优化方法 70 一、LiveJournal发展历程 70 二、LiveJournal架构现状概况 70 三、从LiveJournal发展中学习 71 1、一台服务器 71 2、两台服务器 72 3、四台服务器 73 4、五台服务器 73 5、更多服务器 74 6、现在我们在哪里: 75 7、现在我们在哪里 78 8、现在我们在哪里 79 9、缓存 80 10、Web访问负载均衡 80 11、MogileFS 81 Craigslist 的
数据
库架构 81 Second Life 的
数据
拾零 82 eBay架构的思想金矿 84 一天十亿次的访问-eBay架构(一) 85 七种缓存使用武器 为网站应用和访问加速发布时间: 92 可缓存的CMS系统设计 93 开发大型高负载类网站应用的几个要点 105 Memcached和Lucene笔记 110 使用开源软件,设计高性能可扩展网站 110 面向高负载的架构Lighttpd+PHP(FastCGI)+Memcached+Squid 113 思考高并发高负载网站的系统架构 113 "我在SOHU这几年做的一些门户级别的程序系统(C/C++开发)" 115 中国顶级门户网站架构
分析
1 116 中国顶级门户网站架构
分析
2 118 服务器的大用户量的承载方案 120 YouTube Scalability Talk 121 High Performance Web Sites by Nate Koechley 123 One dozen rules for faster pages 123 Why talk about performance? 123 Case Studies 124 Conclusion 124 Rules for High Performance Web Sites 124 对于应用高并发,DB千万级数量该如何设计系统哪? 125 高性能服务器设计 130 优势与应用:再谈CDN镜像加速技术 131 除了程序设计优化,zend+ eacc(memcached)外,有什么办法能提高服务器的负载能力呢? 135 如何规划您的大型JAVA多并发服务器程序 139 如何架构一个“Just so so”的网站? 148 最便宜的高负载网站架构 152 负载均衡技术全攻略 154
海量
数据
处理
分析
164 一个很有意义的SQL的优化过程(一个电子化支局中的大
数据
量的统计SQL) 166 如何优化大
数据
量模糊
查询
(架构,
数据
库设置,SQL..) 168
求助
:
海量
数据
处理方法 169 # re:
求助
:
海量
数据
处理方法 回复 更多评论 169
海量
数据
库
查询
方略 169 SQL Server 2005对
海量
数据
处理 170 分表处理设计思想和实现 174 Linux系统高负载 MySQL
数据
库彻底优化(1) 179 大型
数据
库的设计与编程技巧 本人最近开发一个访问统计系统,日志非常的大,都保存在
数据
库里面。 我现在按照常规的设计方法对表进行设计,已经出现了
查询
非常缓慢地情形。 大家对于这种情况如何来设计
数据
库呢?把一个表分成多个表么?那么
查询
和插入
数据
库又有什么技巧呢? 谢谢,村里面的兄弟们! 183 方案探讨,关于工程中
数据
库的问题. 184 web软件设计时考虑你的性能解决方案 190 大型Java Web系统服务器选型问题探讨 193 高并发高流量网站架构 210 1.1 互联网的发展 210 1.2 互联网网站建设的新趋势 210 1.3 新浪播客的简介 211 2.1 镜像网站技术 211 2.2 CDN内容分发网络 213 2.3 应用层分布式设计 214 2.4 网络层架构小结 214 3.1 第四层交换简介 214 3.2 硬件实现 215 3.3 软件实现 215 网站架构的高性能和可扩展性 233 资料收集:高并发 高性能 高扩展性 Web 2.0 站点架构设计及优化策略 243 CommunityServer性能问题浅析 250 鸡肋式的多站点支持 250 内容
数据
的集中式存储 250 过于依赖缓存 250 CCS的雪上加霜 250 如何解决? 251 Digg PHP's Scalability and Performance 251 YouTube Architecture 253 Information Sources 254 Platform 254 What's Inside? 254 The Stats 254 Recipe for handling rapid growth 255 Web Servers 255 Video Serving 256 Serving Video Key Points 257 Serving Thumbnails 257 Databases 258 Data Center Strategy 259 Lessons Learned 260 1. Jesse • Comments (78) • April 10th 261 Library 266 Friendster Architecture 273 Information Sources 274 Platform 274 What's Inside? 274 Lessons Learned 274 Feedblendr Architecture - Using EC2 to Scale 275 The Platform 276 The Stats 276 The Architecture 276 Lesson Learned 277 Related Articles 278 Comments 279 Re: Feedblendr Architecture - Using EC2 to Scale 279 Re: Feedblendr Architecture - Using EC2 to Scale 279 Re: Feedblendr Architecture - Using EC2 to Scale 280 PlentyOfFish Architecture 281 Information Sources 282 The Platform 282 The Stats 282 What's Inside 283 Lessons Learned 286 Wikimedia architecture 288 Information Sources 288 Platform 288 The Stats 289 The Architecture 289 Lessons Learned 291 Scaling Early Stage Startups 292 Information Sources 293 The Platform 293 The Architecture 293 Lessons Learned 294 Database parallelism choices greatly impact scalability 295 Introduction to Distributed System Design 297 Table of Contents 297 Audience and Pre-Requisites 298 The Basics 298 So How Is It Done? 301 Remote Procedure Calls 305 Some Distributed Design Principles 307 Exercises 308 References 309 Flickr Architecture 309 Information Sources 309 Platform 310 The Stats 310 The Architecture 311 Lessons Learned 316 Comments 318 How to store images? 318 RE: How to store images? 318 Amazon Architecture 319 Information Sources 319 Platform 320 The Stats 320 The Architecture 320 Lessons Learned 324 Comments 329 Jeff.. Bazos? 329 Werner Vogels, the CTO of 329 Re: Amazon Architecture 330 Re: Amazon Architecture 330 Re: Amazon Architecture 330 It's WSDL 330 Re: It's WSDL 331 Re: Amazon Architecture 331 Scaling Twitter: Making Twitter 10000 Percent Faster 331 Information Sources 332 The Platform 332 The Stats 333 The Architecture 333 L
【
数据
分析
入门】人工智能、
数据
分析
和深度学习是什么关系?如何快速入门 Python Pandas?
本文是原《
数据
分析
大全》、现改名为《
数据
分析
》专栏的第二篇,我在写这篇文章的时候突然意识到——单靠我是不可能把
数据
分析
的方方面面都讲得明明白白,只是是我自己知道什么,然后再输出我所明白的知识罢了。所以《
数据
分析
大全》的“大全”两个字还真是担不起,就改成《
数据
分析
》了。本篇主要介绍
数据
分析
中相关知识点,打算通过这一篇帮助大家顺利入门Python Pandas,掌握基本的用法和思想。上一期《
数据
分析
大全》——Numpy基础。
华为开发者大赛云计算专场
1.华为企业云API使用讲解 该课程介绍如何通过华为企业云API进行二次开发,并选取一个实战案例。后把遇到问题的
求助
渠道介绍给大家。
社交网络的
数据
挖掘与
分析
,什么是社交网络
分析
前面提到的是
数据
挖掘的特性对研究发展及研究方法的影响,另外,
数据
挖掘的这些特性对如何学习和掌握
数据
挖掘提出了指导性的意见,对培养研究生、本科生均有一些指导意见,如应用性在指导
数据
挖掘时,应熟悉应用的业务和需求,需求才是
数据
挖掘的目的,业务和算法、技术的紧密结合非常重要,了解业务、把握需求才能有针对性地对
数据
进行
分析
,挖掘其价值。综上所述,
数据
挖掘的算法分为多个层次,在不同的层面有不同的研究内容,可以看到目前在做
数据
挖掘时的主要研究方向,如利用
数据
融合技术预处理稀疏、异构、不确定、不完整以及多来源
数据
;...
数据
分析
在现代世界商业中的重要性!
数据
分析
是
分析
原始
数据
以检索有意义且可操作的见解的过程,这些见解可用于通知和推动智能业务决策。全文共分为七个部分:1、什么是
数据
分析
;2、
数据
分析
类型;3、
数据
分析
组成部分;4、
数据
分析
与商业
分析
的区别;5、数字
分析
如何促进企业的商业发展;6、
数据
分析
涉及到的步骤;7、
数据
分析
涉及到的工具。
应用实例
27,579
社区成员
68,558
社区内容
发帖
与我相关
我的任务
应用实例
MS-SQL Server 应用实例
复制链接
扫一扫
分享
社区描述
MS-SQL Server 应用实例
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章