社区
Hadoop生态社区
帖子详情
谁能帮忙给一个大数据基础平台的部署说明参考一下?
yingxiaxin
2017-07-14 09:38:51
如题,领导要求写个大数据基础平台的部署说明,可是本人不懂,求助大神。多少数据量不知道,仅搭建比较基础的大数据平台的话,需要怎么怎么部署?如果数据量增大,需要增加什么内容?请帮忙写一下参考,谢谢
...全文
254
1
打赏
收藏
谁能帮忙给一个大数据基础平台的部署说明参考一下?
如题,领导要求写个大数据基础平台的部署说明,可是本人不懂,求助大神。多少数据量不知道,仅搭建比较基础的大数据平台的话,需要怎么怎么部署?如果数据量增大,需要增加什么内容?请帮忙写一下参考,谢谢
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
1 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
shiter
2017-07-14
打赏
举报
回复
对啊,首先需要估计的就是数据流,数据量,运算三个重要指标 带宽,存储,处理 几个网卡,光,还是电 几块盘,固态,机械? 什么 cpu 三个! 从你的 业务好好估计一下
智慧城市之
大数据
专题 -(
基础
篇)何为
大数据
?
面对中年职场危机,从技术转型售前产品方案岗位,售前技能是一种综合能力的体现,总括为“能说会道,以理服人”八字真言。由于每个人认知水平和角度不同,如何把技术的内容通俗易懂的讲给我们的客户是比较大障碍?方案汇报能力是售前岗位一种核心技能。
大数据
作为智慧城市、数字政府、企业数字化转型核心必建项目,对于
大数据
,由于缺乏标准的定义,往往导致市场、客户、方案人员等不同岗位的人都有不同的理解,甚至存在一些误区,本课程《何为
大数据
》
基础
篇重点解决如何正确理解
大数据
,消除信息偏差,最终赢得客户专家认可,从而获得项目机会。常见问题:问:老师,当前正在建设交通管控
平台
,采用数据库是oracle,进行了一些内部数据统计分析,是否算
大数据
?答:您好,从您项目采用的数据存储方式是传统的关系型数据库oracle, 狭义上说,
大数据
是一种全新的技术架构,简单理解,就是采用传统的关系型数据库不能解决的问题,才需要使用
大数据
。同时,对于内部统计分析,由于数据的维度有限,没有融合更多维度的政府其他部门的数据,或者数据也没有经过基本的加工处理,不能完全满足
大数据
基本特征,所以,严格意义上说,不能算为
大数据
项目,或者叫
大数据
的初级版。
大数据
技术框架有哪些类型?
大数据
技术栈包括哪些框架?
写在前面 本文隶属于专栏《100个问题搞定
大数据
理论体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区
帮忙
指出,谢谢! 本专栏目录结构和文献引用请见100个问题搞定
大数据
理论体系 解答 从数据在信息系统中的生命周期看,
大数据
从数据源开始,经过分析、挖掘到最终获得价值一般需要经过6个主要环节,包括数据收集、数据存储、资源管理与服务协调、计算引擎、数据分析和数据可视化,技术体系如图所示。 补充
大数据
处理的不同环节都将面临不同程度的挑战 数据收集层 数据收集层由直接跟数据源对接的模块构成
分布式和
大数据
有什么区别?
本文详解了分布式和
大数据
之间的区别
三节点
大数据
环境安装详细教程
前言 本文隶属于专栏《100个问题搞定
大数据
安装
部署
》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区
帮忙
指出,谢谢! 本专栏目录结构和
参考
文献请见 100个问题搞定
大数据
安装
部署
正文 1.下载CentOS7 百度搜索centos–> 点击centos官网连接–> 点击DVD ISO–> 点击http://ap.stykers.moe/centos/7.6.1810/isos/x86_64/CentOS-7-x86_64-DVD-1810.iso连接进下载. 2.安
Kafka 的线上集群
部署
方案是怎样的?
前言 本文隶属于专栏《1000个问题搞定
大数据
技术体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区
帮忙
指出,谢谢! 本专栏目录结构和
参考
文献请见1000个问题搞定
大数据
技术体系 正文 方案背景 假设每天集群需要承载10亿数据。一天24小时,晚上12点到凌晨8点几乎没多少数据。 使用二八法则估计,也就是80%的数据(8亿)会在16个小时涌入,而且8亿的80%的数据(6.4亿)会在这16个小时的20%时间(3小时)涌入。 QPS计算公式=640000000÷(36060)=6万,也就是说高
Hadoop生态社区
20,808
社区成员
4,690
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章