一般互联网公司的hadoop机器配置是怎样的？

star_dba 2017-11-07 11:58:06
一般互联网公司的hadoop机器配置是怎样的？比如说，物理内存，cpu核数，以及磁盘上怎么根据业务量和场景记性选取？
...全文
1118 4 打赏 收藏 转发到动态 举报
写回复
用AI写文章
4 条回复
切换为时间正序
请发表友善的回复…
发表回复
star_dba 2018-05-18
  • 打赏
  • 举报
 回复
谢谢大家的建议
ck59505 2018-03-28
  • 打赏
  • 举报
 回复
一般都是128G or 256G ，2*8*2 cpu，24T 的sata
小龙在线 2018-03-12
  • 打赏
  • 举报
 回复
关于hadoop的机器配置，有没有估算cpu、内存、存储的方法呢？
老农民挖数据 2018-02-11
  • 打赏
  • 举报
 回复
你这个互联网有点广泛哦， BATJ？ 还是一般的 我是搞通信的。集群规模80台，linux 6 128G +256G 24核， 20T，
【Hadoop】三、集群时间同步
时间服务器配置 时间服务器master01配置（必须是root用户） 修改ntp配置文件【/etc/ntp.conf】 # 修改1 授权192.168.1.0-192.168.1.255网段上的所有机器都可以从这台机器上查询和同步时间 restrict 192.168.1.0 ...
Fourinone分布式计算框架
FourInOne（中文名字“四不像”）是一个四合一分布式计算框架，在写这个框架之前，我也看了老外写的其他开源框架，也对分布式计算进行了长时间的思考，当我们把复杂的hadoop当作一门学科学习时，似乎忘记了我们想...
Hadoop集群入门配置
文章目录Hadoop概述Hadoop组成HDFS架构概述YARN架构概述MapReduce架构概述一、模板虚拟机环境准备1、hadoop100虚拟机配置要求如下1、安装epel-release2、net-tool：工具包集合3、关闭防火墙，关闭防火墙开机自启4、...
Hadoop与Spark是什么？
hadoop：存储和处理大数据； spark：只处理大数据。
大数据之配置（hadoop的环境配置）
大数据之配置（hadoop的环境配置一） hadoop的配置：java环境配置，hadoop集群配置，ssh免密配置 1.ssh免密配置 什么是ssh？ 简单说，SSH是一种网络协议，用于计算机之间的加密登录。如果一个用户从本地计算机，...
Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区，致力于有Hadoop，hive，Spark，Hbase，Flink，ClickHouse，Kafka，数据仓库，大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章