Greenplum 5.21.1 集群安装部署详述

简单来说GPDB是一个分布式数据库软件,其可以管理和处理分布在多个不同主机上的海量数据。对于GPDB来说,一个DB实例实际上是由多个独立的PostgreSQL实例组成的,它们分布在不同的物理主机上,协同工作,呈现给用户的是一个DB的效果。Master是GPDB系统的访问入口,其负责处理客户端的连接及SQL 命令、协调系统中的其他Instance(Segment)工作,Segment负责管理和处理用户数据。

Greenplum 5.21.1 集群安装部署详述

环境准备:
操作系统:CentOS Linux release 7.6.1810 (Core) 64位
master 1台(架构图中的主节点),Standby 1台(架构图中的从节点),Segment 2台。共4台服务器。

一、Master主机 Root 用户上操作

1. 修改/etc/hosts文件,添加下面内容(注:4台服务器相同的配置)

vim /etc/hosts

192.168.18.130 gp-master 192.168.18.131 gp-standby 192.168.18.132 gp-node1 192.168.18.133 gp-node2

2. 服务器关闭selinux,防火墙4台服务器相互开放,测试环境可以直接先关闭防火墙。(注:4台服务器相同的配置)

关闭Firewalld

systemctl stop firewalld
systemctl disable firewalld

永久关闭Selinux

vim /etc/selinux/conf

# This file controls the state of SELinux on the system. # SELINUX= can take one of these three values: # enforcing - SELinux security policy is enforced. # permissive - SELinux prints warnings instead of enforcing. # disabled - No SELinux policy is loaded. SELINUX=disabled # SELINUXTYPE= can take one of three two values: # targeted - Targeted processes are protected, # minimum - Modification of targeted policy. Only selected processes are protected. # mls - Multi Level Security protection. SELINUXTYPE=targeted

注:查看Selinux运行状态:getenforce,CLI界面非永久生效设置SeLinux:setenforce 0(0-1对应关闭和开启)

3. 操作系统参数设置

 vim /etc/sysctl.conf  (注:4台服务器相同的配置)

kernel.shmmax = 500000000 kernel.shmmni = 4096 kernel.shmall = 4000000000 kernel.sem = 250 512000 100 2048 kernel.sysrq = 1 kernel.core_uses_pid = 1 kernel.msgmnb = 65536 kernel.msgmax = 65536 net.ipv4.tcp_syncookies = 1 net.ipv4.ip_forward = 0 net.ipv4.conf.default.accept_source_route = 0 net.ipv4.tcp_tw_recycle = 1 net.ipv4.tcp_max_syn_backlog = 4096 net.ipv4.conf.all.arp_filter = 1 net.ipv4.conf.default.arp_filter = 1 net.core.netdev_max_backlog = 10000 vm.overcommit_memory = 2 kernel.msgmni = 2048 net.ipv4.ip_local_port_range = 1025 65535

 vim /etc/security/limits.conf  (注:4台服务器相同的配置)

* soft nofile 65536 * hard nofile 65536 * soft nproc 131072 * hard nproc 131072

磁盘预读参数及 deadline算法修改 (注:4台服务器相同的配置)

blockdev --setra 65536 /dev/sda echo deadline > /sys/block/sda/queue/scheduler

注:磁盘盘符sda需根据自己的实际情况进行配置

软件下载地址:https://network.pivotal.io/products/pivotal-gpdb,下载:greenplum-db-5.21.1-rhel7-x86_64.rpm

在Master主机上安装GP二进制文件,也就是主机名是mdw的服务器。(注:在master上安装即可,后面通过批量的方法安装剩下的服务器)

rpm -ivh greenplum-db-5.21.1-rhel7-x86_64.rpm

注:默认安装目录:/usr/local

 在Master上添加gpadmin用户

adduser gpadmin echo gpadmin | passwd --stdin gpadmin

 注:设置密码为了后面gpssh-exkeys -f hostfile_allhosts 使用

 在Master上给gpadmin用户提权

[root@gp-master ~]# visudo gpadmin ALL=(ALL) ALL gpadmin ALL=(ALL) NOPASSWD:ALL

在Master主机上赋予gpadmin用户Greenplum文件夹的的权限

chown -R gpadmin.gpadmin /usr/local/greenplum-db*

 二、Master 主机 Gpadmin用户上操作

准备用于批量安装软件以及后续集群的初始化文件,hostfile_allhosts,hostfile_segments,hostfile_mshosts,存放到/home/gpadmin

su - gpadmin

vim hostfile_allhosts

gp-master
gp-standby
gp-node1
gp-node2

vim hostfile_segments

gp-node1 gp-node2

vim hostfile_mshosts

gp-master gp-standby

设置各主机之间免密登录

gpssh-exkeys -f hostfile_allhosts

注:需输入gpadmin用户的密码,此处为:gpadmin

设置用于安装Greenplum的文件夹权限

gpssh -f hostfile_allhosts => sudo chown gpadmin.gpadmin /usr/local => exit

创建及赋权master/standby主机元数据存储目录

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:https://www.heiqu.com/e5b17c40a71f5a10a631cecce12e740d.html