MogileFS快速上手.pdf

《高级软件架构师实战培训 阶段一》 跟着cc学架构系列精品教程 本部分课程概览 n 根据实际的应用需要，学习要用到的MogileFS的知识，以快速上手、理解并掌握 MogileFS n 一： MogileFS简介、安装和基本配置 包括：是什么、有什么、能干什么，以及特点和适用性； 通过源码安装、基本的配置等 n 二：MogileFS的基本概念和使用 包括：理解MogileFS的基本概念、使用方式和各种命令 n 三：理解MogileFS 包括：高层流程、存储节点、表说明 n 四：MogileFS的Java客户端开发 包括：基本的Java客户端开发，和Spring集成开发 n 五：基于MogileFS的小应用示例 n 六：与其它技术的集成应用 包括：和Nginx的集成，和Memcached的集成 《高级软件架构师实战培训 阶段一》 跟着cc学架构系列精品教程 MogileFS简介-1 n MogileFS是什么 MogileFS是一款开源的、高性能的、分布式的文件系统，用于组建分布式文件集 群，跟Memcached是同门，都由LiveJournal旗下Danga Interactive公司开发。 n MogileFS能干什么 最主要的功能就是：用来存取海量文件，而不用关心具体的文件存放位置、存储容 量大小，以及文件损坏和丢失等问题。 n MogileFS特点 1：应用层：不需要特殊的核心组件 2：无单点失败：MogileFS分布式文件存储系统安装的三个组件（存储节点、跟踪器、跟踪用 的数据库），均可运行在多个机器上，因此没有单点失败。 3：自动进行文件复制：基于不同的文件 “分类”，文件可以被自动的复制到多个有足够存储 空间的存储节点上，这样可以满足这个“类别”的最少复制要求。 4：比RAID更好： 在一个非存储区域网络的RAID ，磁盘是冗余的，但主机不是，如果你整个 机器坏了，那么文件也将不能访问。 MogileFS分布式文件存储系统在不同的机器之间进行 文件复制，因此文件始终是可用的。 5：传输中立，无特殊协议 6：简单的命名空间：文件通过一个给定的key来确定，是一个全局的命名空间 《高级软件架构师实战培训 阶段一》 跟着cc学架构系列精品教程 MogileFS简介-2 n MogileFS有什么——三大部分 1：Trackers （跟踪器,调度器）——mogilefsd进程 这是MogileFS的核心部分，mogilefsd进程就是trackers程序，做了很多工 作，包括复制、删除、查询、监控等等。 （1） mogilefsd主要的子进程有: Replication — 在机器间复制文件 Deletion —从命名空间删除是立即的，从文件系统删除是异步的 Query — 响应客户端的请求 Reaper — 在磁盘失败后将文件复制请求重新放到队列 Monitor — 监测主机和设备的健康度和状态 （2）采用基于事件的父进程或消息总线来管理所有来之于客户端应用的交互， 包括将请求负载平衡到 “query workers” ，让mogilefsd的子进程去处理。 （3）其默认的配置文件在/etc/mogilefs/mogilefsd.conf，可以自己指定。 Store1 Tracker Store2 MySQL 元数据