我使用VirtualBox创建了六台虚拟机，其中监控节点一个，元数据节点两个，数据节点三个，并使用监控节点作为客户端。机器名和ip如下：
mon1.ihep.ac.cn
192.168.56.107
mds1.ihep.ac.cn
192.168.56.108
mds2.ihep.ac.cn
192.168.56.109
osd1.ihep.ac.cn
192.168.56.110
osd2.ihep.ac.cn
192.168.56.111
osd3.ihep.ac.cn
192.168.56.112
操作系统使用的的Fedora14，（这个内核版本是2.26.35，小小意见，最好使用2.26.34以上的版本，由于其内核包含Ceph客户端以及btrfs，低版本折腾起来太费时间，当然这也取决于你追求啥，我就是想搭个环境测一测ceph)
所有虚拟机特别要注意的是一定要关掉iptables和selinux，反正这是测试环境，有时候的问题往往是他们引起的。关掉省心！（这只是测试，生产环境悠着点）
机器之间不用密码直接登录。在任一台机器运行如下命令：
#ssh-keygen
#cd ~/.ssh; cat id_dsa.pub >>authorized_keys
#复制.ssh 文件夹到其他机器用户home目录上
2. 在六个节点都安装ceph，步骤基本一致(出去数据节点）
下载ceph
#wget
解压，配置，安装
#tar xzvf ceph-0.27.1.tar.gz
#cd ceph-0.27.1
# ./autogen.sh
#./configure ##可能有些会提示你有些依赖包没装，装上就ok
# make
# make install
#cp ./src/sample.* /usr/local/etc/ceph/ ##拷贝ceph的配置文件，后面要修改
#mv /usr/local/etc/ceph/sample.ceph.conf /usr/local/etc/ceph/ceph.conf
#mv /usr/local/etc/ceph/sample.fetch_config /usr/local/etc/ceph/fetch_config
#cp ./src/init-ceph /etc/init.d/ceph
#mkdir /var/log/ceph; ##存放log，现在ceph自己还不自动建这个目录
#mkdir /data ##存储相应信息，下面配置会用到
针对数据节点安装btrfs文件系统，特别注意，这一步只针对数据节点，其他类型节点没必要
#yum install btrfs-progs
#fdisk /dev/sda (进入以后做一些选择，不懂就man吧） ##这主要就是创建一个新的分区，我这里sda对应的磁盘还有一部分空余，所以在其上创建了一个/dev/sda4
#mkdf.btrfs /dev/sda4
3.配置。主要要修改的就是/usr/local/etc/ceph/下的两个文件ceph.conf和fetch_config。
我使用的ceph.conf文件的内容;
; global
[global]
; enable secure authentication
;auth supported = cephx ##这个注释掉吧，用来授权访问的一个东东，测试没关系的
; allow ourselves to open a lot of files
max open files = 131072
; set up logging
log file = /var/log/ceph/$name.log
; set up pid files
pid file = /var/run/ceph/$name.pid
; monitors
; You need at least one. You need at least three if you want to
; tolerate any node failures. Always create an odd number.
[mon]
mon data = /data/mon$id
; logging, for debugging monitor crashes, in order of
; their likelihood of being helpful :)
;debug ms = 1
;debug mon = 20
;debug paxos = 20
;debug auth = 20
[mon.0]
host = mon1.ihep.ac.cn
mon addr = 192.168.56.107:6789
;[mon.1]
; host = beta
; mon addr = 192.168.0.11:6789
;[mon.2]
; host = gamma
; mon addr = 192.168.0.12:6789
; mds
; You need at least one. Define two to get a standby.
[mds]
; where the mds keeps it's secret encryption keys
keyring = /data/keyring.$name
; mds logging to debug issues.
;debug ms = 1
;debug mds = 20
[mds.alpha]
host = mds1.ihep.ac.cn
[mds.beta]
host = mds2.ihep.ac.cn