MFS无法访问文件

说好不能打脸

Java领域优质创作者

博客专家认证

2014-05-04 01:34:05

各位好啊，就有问题问问各位大神。
我在测试系统上面跑的mfs有两个数据节点，昨天机房断电机器都停止了。今天重新启动mfs后，客户端能够挂载，但是没法访问mfs上面的文件内容，请问是什么原因啊？

...全文

191 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

疯狂原始人2 2014-05-05

打赏
举报

回复

MFS特性（根据官方网站翻译） ★ 高可靠性（数据能被分成几个副本存储在不同的计算机里） ★ 通过增加计算机或增加新的硬盘动态扩充可用磁盘空间 ★ 可以设置删除文件的空间回收时间 [root@mysql-bk serydir]# mfsgettrashtime bind-9.4.0.tar.gz bind-9.4.0.tar.gz: 600 文件被删除10 分钟后（600 秒），才真正删除文件，回收磁盘空间。 ★ 为文件创建快照 MFS文件系统的组成 1、元数据服务器。在整个体系中负责管理管理文件系统，目前MFS 只支持一个元数据服务器master，这是一个单点故障，需要一个性能稳定的服务器来充当。希望今后MFS 能支持多个master 服务器，进一步提高系统的可靠性。 2、元数据日志服务器。备份master 服务器的变化日志文件，文件类型为changelog_ml.*.mfs。当元数据服务器数据丢失或者损毁，可从日志服务器取得文件进行恢复。 3、数据存储服务器chunkserver。真正存储用户数据的服务器。存储文件时，首先把文件分成块，然后这些块在数据服务器chunkserver 之间复制（复制份数可以手工指定，建议设置副本数为3）。数据服务器可以是多个，并且数量越多，可使用的“磁盘空间”越大，可靠性也越高。 4、客户端。使用MFS 文件系统来存储和访问的主机称为MFS 的客户端，成功挂接MFS 文件系统以后，就可以像以前使用NFS 一样共享这个虚拟性的存储了。元数据服务器安装和配置元数据服务器可以是linux,也可以是unix,你可以根据自己的使用习惯选择操作系统,在我的环境里,我是用freebsd 做为MFS 元数据的运行平台。GNU 源码，在各种类unix 平台的安装都基本一致。有两个pdf文档 mfs文件系统使用手册.pdf moosefs分布文件系统.pdf

mooseFS（moose 驼鹿）是一款网络分布式文件系统。它把数据分散在多台服务器上，但对于用户来讲，看到的只是一个源。MFS也像其他类unix文件系统一样，包含了层级结构（目录树），存储着文件属性（权限，最后访问和修改时间），可以创建特殊的文件（块设备，字符设备，管道，套接字），符号链接，硬链接。

本套视频内容丰富，分为集群化构建、缓存、存储、监控、安全、装机六大维度。服务构建步骤详细，手把手带着你上路；课后辅助资料全面，附录详细代码标注；深度技术讲解，逐步为你剖析底层原理……集群化阶段，讲解LVS与keepalived结合构建企业级负载调度集群，可供以万计用户同时访问；缓存阶段，讲解大量生产环境经典业务案例，让你轻松解决压力难点；存储阶段，糅合讲解 NFS、MFS、ISCSI 三类企业级存储技术，使你从容面对各类存储业务需求，最多可达PB级别！监控阶段，“上阵父子兵”，Cacti、Nagios、Zabbix，一个都不能少！轻松搞定！装机阶段，PXE、Cobbler混合双打，多个机房多种配置轻松搞定……

mfs是一个分布式文件系统 MooseFS(即Moose File System，简称MFS)是一个具有容错性的网络分布式文件系统，它将数据分散存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个备份副本，对于访问MFS的客户端或者用户来说，整个分布式网络文件系统集群看起来就像一个资源一样，也就是说呈现给用户的是一个统一的资源。 MooseFS就相当于UNIX的文件系统（类似ext3、ext4、nfs），它是一个分层的目录树结构。 MFS存储支持POSIX标准的文件属性（权限，最后访问和修改时间），支持特殊的文件，如块设备，字符设备，管道、套接字、链接文件（符合链接、硬链接）；优点

由于用户数量的不断攀升,我对访问量大的应用实现了可扩展、高可靠的集群部署（即lvs+keepalived的方式），但仍然有用户反馈访问慢的问题。通过排查个服务器的情况，发现问题的根源在于共享存储服务器NFS。在我这个网络环境里，N个服务器通过nfs方式共享一个服务器的存储空间，使得NFS服务器不堪重负。察看系统日志，全是nfs服务超时之类的报错。一般情况下，当nfs客户端数目较小的时候，NFS性能不会出现问题；一旦NFS服务器数目过多，并且是那种读写都比较频繁的操作，所得到的结果就不是我们所期待的。下面是某个集群使用nfs共享的示意图这种架构除了性能问题而外，还存在单点故障，一旦这个NFS服

Hadoop生态社区

20,811

社区成员

4,691

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章