当服务器数量达到一定的规模时,仅依靠人为完成批量部署服务器个资源的配置,运维工作将变得繁琐且容易出错,为了解决这一问题,我们应该怎么办呢?我们可以引入一批工具,这批工具可编写相应的manifests代码,运行它便可以自动完成所有的工作,目前比较流行的运维工具主要有:puppet,ansible, slackstack等,在这我们主要以puppet来展开话题。在一些大型互联网企业中,运维自动化管理着几百甚至上千台服务器,它可以针对多台服务器进行统一操作,例如部署统一软件、进行统一上线维护等,而且能够快速完成上线部署,减少人力及人力误操作风险。
二、Puppet的工作原理
puppet的目的是让系统管理员只集中于要管理的目标服务器,而忽略实现的细节。puppet既可以在单机上使用,也可以C/S结构使用,在大规模部署puppet的情况下,通常我们会使用C/S结构,在这种结构下,服务端运行puppet-master程序客户端运行puppet-client服务程序
具体的工作流程图如下所示:
对于puppet的的掌握,理解puppet的工作原理是一个必要的的阶段,只有在了解了puppet的工作原理后才能更好应用puppet,下面让我们一起了解学习puppet的工作原理:
说到puppet的工作原理,不得不从以下四个方面来说到,如下所示:
(1)定义:使用Puppet特定的语言定义基础配置信息。通常我们把这些信息写在Modules中。
(2)模板:在配置执行之前检测代码,但并不真正执行。
(3)执行:定义的配置自动部署。检测并记录下所发生变化的部分。
(4)报告:将期待的变化、实际发生的变化及任何修改发送给报告系统。
如下所示为puppet的工作数据流示意图
数据流说明:
1.首先所有的节点(Node)Node节点将Facts和本机信息发送给Master
2.Master告诉Node节点应该如何配置,将这些信息写入Catalog后传给Node。
3.Node节点在本机进行代码解析验证并执行,将结果反馈给Master。
4.Master通过API将数据发给分析工具。报告完全可以通过开放API或与其他系统集成。
整个数据流的走向是基于SSL安全协议的,如下图所示:
模板文件处理过程说明如下:
Puppet通过编译Manifest中的内容 (即模板中内容),将编译好的代码存入Catalog。在执行前先进行代码的验证,再执行,完成最开始所定义好的状态。代码编译过程如图所示:
如下所示为整个puppet自动部署过程中agent和master的详细的交互过程:
过程说明:
1. Puppet客户端Agent将节点名与facts信息发送给Master。
2. Puppet服务端Master通过分类判断请求的客户端是谁,它将要做什么。这个判断是通过site.pp中包含的Node.pp配置文件定义的。
3. Puppet服务端Master将所需要的Class类信息进行编译后存入Catalog并发送给Puppet客户端Agent,到此完成第一次交互。
4. Puppet客户端Agent对Catalog进行代码验证(语法检查及错误检查)并执行。主要是代码的验证,并将执行过程的信息及结果写入日志。
5. Puppet客户端Agent最终达到最开始所定义的状态,并且将结果及任何执行数据通过开放API的形式发送给Puppet服务端Master。
以上就是puppet的工作原理需要注意是:因为整个过程中都是基于ssl实现的,所以首要的是保证agent和master间可以基于ssl通讯!
三、puppet常用资源及配置实例
实例一: 创建CentOS用户为普通用户,且uid为4000,gid为3000,所属组为centos,附加组为mygrp
user{'centos':
name => 'centos', #定义用户名
ensure => present, #创建用户
uid => 4000, #定用户id
groups => 'mygrp', #定义其他附加组
require => Group['mygrp'] #此资源依赖于事先创建mygrps组
}
group {'mygrp':
name => 'mygrp',#定义组名
ensure => present, #创建组,与此相反的是absent,删除组
gid => '3000', #组id
system => false, #是否为系统组,默认为false
}
总结:
user常用属性:
name:用户名,uid:用户id,gid:组id,groups:附加组,comment:注释信息
expiry:过期时间,home:家目录,shell:默认的shell类型,system:是否为系统组,
ensure:创建或删除用户即present、absent,password:加密后的密码
group常用属性:
ensure:创建或删除组即present、absent,name:组id,system:是否为系统组等
[root@node1 manifets]# puppet apply -v user.pp #将此manifests清单编译为伪代码catalog,并执行,且返回执行结果至此单机模式的主机上
Notice: Compiled catalog for node1.alren.com in environment production in 0.55 seconds
Info: Applying configuration version '1480561275'
Notice: /Stage[main]/Main/Group[mygrp]/ensure: created
Notice: /Stage[main]/Main/User[centos]/ensure: created
Notice: Finished catalog run in 0.11 seconds
[root@node1 manifets]# id centos
uid=4000(centos) gid=4000(centos) groups=4000(centos),3000(mygrp)
[root@node1 manifets]# vi user.pp
[root@node1 manifets]# puppet apply -v user.pp
Notice: Compiled catalog for node1.alren.com in environment production in 0.58 seconds
Info: Applying configuration version '1480561376'
Notice: /Stage[main]/Main/Group[mygrp]/ensure: removed
Notice: /Stage[main]/Main/User[centos]/ensure: removed
Notice: Finished catalog run in 0.13 seconds
[root@node1 manifets]# id centos
id: centos: no such user
[root@node1 manifets]#
实例二:此manifests代码为安装httpd包,为其提供配置文件,并且启动服务
service{'httpd':
ensure => running,
enable => true,
restart => 'systemctl restart httpd.service',
require => Package['httpd'],
}
package{'httpd':
ensure => installed,
}
file{'httpd.conf':
path => '/etc/httpd/conf/httpd.conf',
source => '/root/manifests/httpd.conf',
ensure => file,
notify => Service['httpd'],
before => Service['httpd'],
}
package常用属性:
ensure:installed,present,latest,absent name:包名
source:程序包来源,仅对不会自动下载的相关程序包的provider有用,例如rpm或dpkg
servicec常用属性:
ensure:running,stopped运行停止 enable:开机是否启动 restart:重启命令
require:被依赖于事先安装程序包,
file常用属性:
path:文件需放置的位置所在处 source:源文件在哪 ensure:file,present,absent,directory,link...