vi /etc/hosts

# 添加
1.1.1.1 Jq01
1.1.1.2 Jq02
1.1.1.3 Jq03

Centos7.x：
systemctl stop firewalld    --停止防火墙
systemctl disable firewalld    --禁用防火墙
Centos6.5：
service iptables stop    --停止防火墙
/sbin/chkconfig iptables off    --禁用防火墙

setenforce 0    --临时关闭SELinux
sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config   --永久关闭SELinux
getenforce    --获取SELinux状态
Centos6.5返回Disabled说明关闭成功
Centos7.X返回Permissive说明关闭成功

在Greenplum 所有节点安装ntp服务器，然后Jq02节点和Jq03节点都同步Jq01节点的时间。
yum install ntp   --所有节点执行安装命令
systemctl start ntpd    --所有节点执行启动服务
systemctl enable ntpd    --所有节点执行启用ntpd
然后在Jq02节点和Jq03节点执行：
ntpdate Jq01
#注：Greenplum需要各个节点的时间都是一致的，切记

追加到文件/etc/sysctl.conf，使用sysctl -p命令即时生效。
注意：如果安装gp的服务器装了petabase数据库，此参数不要更新，因为petabase所需的配置要比gp配置高，用原有参数即可。
#gp配置
kernel.shmmax = 50000000000
kernel.shmmni = 4096
kernel.shmall = 4000000000
kernel.sem = 250 512000 100 2048
kernel.sysrq = 1
kernel.core_uses_pid = 1
kernel.msgmnb = 65536
kernel.msgmax = 65536
kernel.msgmni = 2048
net.ipv4.tcp_syncookies = 1
net.ipv4.ip_forward = 0
net.ipv4.conf.default.accept_source_route = 0
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_max_syn_backlog = 4096
net.ipv4.conf.all.arp_filter = 1
net.ipv4.ip_local_port_range = 1025 65535
net.core.netdev_max_backlog = 10000
net.core.rmem_max = 2097152
net.core.wmem_max = 2097152
vm.overcommit_memory = 1

#下面内容追加到文件/etc/security/limits.conf即可
#gp配置
* soft nofile 65536
* hard nofile 65536
* soft nproc 131072 
* hard nproc 131072

Centos6.5：  修改/etc/security/limits.d/90-nproc.conf
将   *   soft    nproc  2048  改为  *   soft    nproc   131072
Centos7.x：  修改/etc/security/limits.d/20-nproc.conf
将   *   soft    nproc  2048  改为  *   soft    nproc   131072

GP建议使用XFS文件系统，CentOS 7默认就是XFS文件系统。如果你是CentOS 6系统，默认是EXT4，需要额外安装XFS文件系统。
所有节点单独挂载两块磁盘做raid0（或一块），我这里假定为sdb。
mkfs.xfs /dev/sdb
然后在/etc/fstab文件中追加挂载命令：
/dev/sdb /data xfs nodev,noatime,inode64,allocsize=16m 0 0
执行mount -a挂载即可。

对于预读扇区数，官方文档的推荐值为16384，但应该为65536更合理。实际上预读的字节数是blockdev设置除以2，而GP缺省的blocksize为32KB，刚好与65536(32768B/32KB)对应。
检查某块磁盘的read-ahead设置：
blockdev --getra /dev/sdb
临时修改系统的read-ahead设置：
blockdev --setra 65536 /dev/sdb
要想永久生效，还是需要将修改命令追加到/etc/rc.local尾部

Linux磁盘I/O调度器对磁盘的访问支持不同的策略，默认的为CFQ，GP建议设置为deadline。
假定数据盘为sdb如下设置：
echo deadline > /sys/block/sdb/queue/scheduler
要想永久生效，还是需要将修改命令追加到/etc/rc.local尾部。
注：都配置完毕后，重启生效即可。

首先上传greenplum-db-5.10.2-rhel7-x86_64.bin文件到/data
cd /data
然后执行：
/bin/bash greenplum-db-5.10.2-rhel7-x86_64.bin
长按回车大概23s直到出现让输入yes或no
输入是否接受选项：
输入yes
输入安装路径选项：
输入/data/gp510
输入确认安装路径选项：
然后输入yes
输入确认创建目录选项：
再输入yes

安装完成后/data/gp510下的相关文件如下：
greenplum_path.sh：此文件包含Greenplum数据库的环境变量。
bin：此目录包含Greenplum数据库管理程序，此目录还包含PostgreSQL客户端和服务器程序，其中大部分也用于Greenplum数据库。
sbin：支持/内部脚本和程序。
docs：Greenplum数据库文档（PDF文件）。
etc：OpenSSL的示例配置文件。
ext：一些Greenplum数据库实用程序使用的捆绑程序（如Python）。
include：Greenplum数据库的C语言头文件。
lib：Greenplum数据库和PostgreSQL库文件。
share：Greenplum数据库的共享文件。

#设置环境变量
source /data/gp510/greenplum_path.sh

#创建all_hosts和all_segments文件
cd /data/gp510
vi all_hosts
添加：
Jq01
Jq02
Jq03
cp all_hosts all_segments

#如果主节点机器不装数据节点，只装master主节点（建表等文件，没有数据文件），则：
vi all_segments
添加：
Jq02
Jq03

#配置免密登录
cd /data/gp510
gpssh-exkeys -f all_hosts

#运行gpinstall
cd /data/gp510
gpseginstall -f all_hosts -u gpadmin -p 123456
#该命令就是将Greenplum安装目录scp到所有机器，创建gpadmin用户（设置密码为-p指定的123456），并将安装目录所有权更改为gpadmin

#检察分发结果
cd /data/gp510
gpssh -f all_hosts -e ls -l $GPHOME
#输出结果包含这3个服务器上相同目录下有相同的文件则成功。

#创建数据目录并授权
#注意：这里创建的目录是要存储数据文件的，需在之前规划好的存储目录上
#此步骤在Jq01上执行：
#创建master节点目录，和权限
mkdir -p /data/gp510/gpdata/master
chown gpadmin:gpadmin -R /data/gp510/gpdata 
将Jq02机器作为stand by master的机器（master的镜像），创建目录和权限
gpssh -h Jq02 -e 'mkdir -p /data/gp510/gpdata/master'
gpssh -h Jq02 -e 'chown gpadmin:gpadmin -R /data/gp510/gpdata'
给所有安装数据节点的机器，创建primary和mirror镜像目录和权限
gpssh -f /data/gp510/all_host -e 'mkdir -p /data/gp510/gpdata/primary'
gpssh -f /data/gp510/all_host -e 'mkdir -p /data/gp510/gpdata/mirror'
gpssh -f /data/gp510/all_host -e 'chown gpadmin.gpadmin -R /data/gp510/gpdata/'

#创建Greenplum初始化文件
su - gpadmin
mkdir -p /data/gp510/gpconfig
cp /data/gp510/docs/cli_help/gpconfigs/gpinitsystem_config /data/gp510/gpconfig
chmod 755 /data/gp510/gpconfig/gpinitsystem_config

#编辑Greenplum初始化文件
#参数解释
RRAY_NAME：设置集群名称，默认即可。
SEG_PREFIX：设置segment的前缀，默认gpseg即可。
PORT_BASE：设置segment的起始端口，会从此端口往上增加，默认从40000开始，一般默认即可。
DATA_DIRECTORY：设置segment primary的数据存储目录，有几个segment节点就需要设置几个数据存储目录（根据前文可知要部署6个segment节点，数据目录为 /data/gp510/gpdata/primary，所以要将数据目录填写6遍）。
MASTER_HOSTNAME：设置master的主机名，Jq01。
MASTER_DIRECTORY：设置master的存储目录，/data/gp510/gpdata/master。
MASTER_PORT：设置master的端口，默认5432。
TRUSTED_SHELL：设置节点之间的信任方式，默认SSH，默认即可。
CHECK_POINT_SEGMENTS：预写日志文件（WAL）数量，默认为8，这意味着为主机上的每个Segment或Master实例分配1088MB的WAL空间，默认即可。
ENCODING=UNICODE：设置初始字符集，默认UNICODE（UTF-8），默认即可。
MIRROR_PORT_BASE：指定第一个mirror segment的端口号，其它mirror segment在此基础上加1，它的设置范围是1到65535，但是设置时要注意不能与primary segment冲突，默认50000即可。
REPLICATION_PORT_BASE：指定第一个primary segment用于数据复制的端口号，其它primary segment以此为基础，每次加1,计算复制用端口号。它的设置也不要与primary segment冲突。取值范围1到65535，默认41000即可。
MIRROR_REPLICATION_PORT_BASE：指定第一个mirror segment用于数据复制的端口号，其它mirror segment以此为基础，每次加1,计算复制用端口号。它的设置也不要与mirror segment冲突。取值范围1到65535，默认51000即可。
MIRROR_DATA_DIRECTORY：指定了mirror segment的数据目录，声明的目录数量必须与primary segment的目录数量一致，而且要保证进行初始化操作的os用户对这些目录有读写权限（根据前文可知要部署6个segment节点，所以mirror也是6个，数据目录为 /data/gp510/gpdata/mirror，所以要将数据目录填写6遍）。
注：注意，其中所有需要的目录都是在创建数据存储区域时做好的。

#初始化数据库(用gpadmin用户执行)
gpinitsystem -c /data/gp510/gpconfig/gpinitsystem_config -h /data/gp510/all_segments -s Jq02
gpinitsystem命令参数解释：
-c：指定初始化文件。
-h：指定segment主机文件。
-s：指定standby主机，创建standby节点。
中间需要输入几次y，如果不报ERROR，GP数据库就安装好了并且各个节点都启动了。安装过程中一定要注意相关执行的方式和权限，不然可能会失败

#如何使用回退脚本
如果gpinitsystem实用程序失败，如果系统处于部分安装状态，它将创建以下备用脚本：
/ gpAdminLogs / backout_gpinitsystem_ <user> _ <timestamp>
您可以使用此脚本清理部分创建的Greenplum数据库系统。此回退脚本将删除任何实用程序创建的数据目录，postgres进程和日志文件。纠正导致gpinitsystem失败并运行退出脚本的错误后，您应该准备重试初始化您的Greenplum数据库数组。
以下示例显示如何运行回退脚本：
sh backout_gpinitsystem_gpadmin_***_***

#设置环境变量
在gpadmin 用户下执行
vi ~/.bash_profile
添加如下内容（其中的路径根据实际部署情况修改）
source /data/gp510/greenplum_path.sh
export MASTER_DATA_DIRECTORY=/data/gp510/gpdata/master/gpseg-1
export PGPORT=5432
export PGUSER=gpadmin
生效并拷贝到Standby
source ~/.bash_profile
scp ~/.bash_profile gpadmin@Jq02:~/.bash_profile

#修改访问权限
修改master数据目录下的pg_hba.conf访问权限
cd /data/gp510/gpdata/master/gpseg-1
vi pg_hba.conf
增加两行  (全部小写)
host   template1     all    0.0.0.0/0    reject
host   all    all   0.0.0.0/0  md5  

然后重新加载配置文件
gpstop -u

#数据库启动和关闭
在gpadmin用户下
gpstart
gpstop –M fast

#数据库修改gpadmin用户密码
在gpadmin用户下
psql -d postgres
在postgres的命令行，修改gpadmin用户密码为123456
alter user gpadmin with password ‘123456’

在GP库master节点服务器上，切换到GP库的操作系统用户（如 gpadmin），执行如下命令

shared_buffers 默认值：125MB  建议值：1GB  
查看参数配置值：
gpconfig -s shared_buffers 
修改参数配置值
gpconfig -c shared_buffers -v 1GB

work_mem  默认值：32 MB  建议值：512MB
查看参数配置值：
gpconfig -s work_mem  
修改参数配置值
gpconfig -c work_mem  -v 512MB

statement_mem 默认值：125 MB  建议值：512MB
查看参数配置值：
gpconfig -s statement_mem 
修改参数配置值
gpconfig -c statement_mem -v 512MB

effective_cache_size  默认值：512 MB  建议值：8GB
查看参数配置值：
gpconfig -s effective_cache_size  
修改参数配置值
gpconfig -c effective_cache_size  -v 8GB


max_prepared_transactions 默认值：250  建议值：500
查看参数配置值：
gpconfig -s max_prepared_transactions 
修改参数配置值
gpconfig -c max_prepared_transactions -v 500


maintenance_work_mem 默认值：64MB  建议值：256MB
查看参数配置值：
gpconfig -s maintenance_work_mem 
修改参数配置值
gpconfig -c maintenance_work_mem -v 256MB


gp_vmem_protect_limit  建议值：10240
查看参数配置值：
gpconfig -s gp_vmem_protect_limit 
修改参数配置值
gpconfig -c gp_vmem_protect_limit -v 10240

max_connections 默认值：250  建议值：500
查看参数配置值：
gpconfig -s max_connections 
修改参数配置值
gpconfig -c max_connections -v 2500 -m 500


修改参数后需要重启GP库，使参数生效
关闭GP库
gpstop -M fast 
启动GP库
gpstart -a

gpmaster master
gpslave1 standby segment
gpslave2 segment
gpslave3 segment

# FILE NAME: gpinitsystem_config

# Configuration file needed by the gpinitsystem

################################################
#### REQUIRED PARAMETERS
################################################

#### Name of this Greenplum system enclosed in quotes.
ARRAY_NAME="Greenplum Data Platform"

#### Naming convention for utility-generated data directories.
SEG_PREFIX=gpseg

#### Base number by which primary segment port numbers 
#### are calculated.
PORT_BASE=40000

#### File system location(s) where primary segment data directories 
#### will be created. The number of locations in the list dictate
#### the number of primary segments that will get created per
#### physical host (if multiple addresses for a host are listed in 
#### the hostfile, the number of segments will be spread evenly across
#### the specified interface addresses).
declare -a DATA_DIRECTORY=(/data/gpgdgf/gpdata/primary /data/gpgdgf/gpdata/primary)

#### OS-configured hostname or IP address of the master host.
MASTER_HOSTNAME=gpmaster

#### File system location where the master data directory 
#### will be created.
MASTER_DIRECTORY=/data/gpgdgf/gpdata/master

#### Port number for the master instance. 
MASTER_PORT=5432

#### Shell utility used to connect to remote hosts.
TRUSTED_SHELL=ssh

#### Maximum log file segments between automatic WAL checkpoints.
CHECK_POINT_SEGMENTS=8

#### Default server-side character set encoding.
ENCODING=UNICODE

################################################
#### OPTIONAL MIRROR PARAMETERS
################################################

#### Base number by which mirror segment port numbers 
#### are calculated.
MIRROR_PORT_BASE=50000

#### Base number by which primary file replication port 
#### numbers are calculated.
REPLICATION_PORT_BASE=41000

#### Base number by which mirror file replication port 
#### numbers are calculated. 
MIRROR_REPLICATION_PORT_BASE=51000

#### File system location(s) where mirror segment data directories 
#### will be created. The number of mirror locations must equal the
#### number of primary locations as specified in the 
#### DATA_DIRECTORY parameter.
declare -a MIRROR_DATA_DIRECTORY=(/data/gpgdgf/gpdata/mirror /data/gpgdgf/gpdata/mirror)


################################################
#### OTHER OPTIONAL PARAMETERS
################################################

#### Create a database of this name after initialization.
#DATABASE_NAME=name_of_database

#### Specify the location of the host address file here instead of
#### with the the -h option of gpinitsystem.
#MACHINE_LIST_FILE=/home/gpadmin/gpconfigs/hostfile_gpinitsystem

#备份
gpbackup --dbname db_hybzk --single-data-file --backup-dir /data/thunisoft/gpbackup/

#恢复
gprestore --backup-dir /data/gpgdgf/backup/ --timestamp 20201214175326 --redirect-db db_hybzk_20201130

gpconfig -s gp_interconnect_type -v TCP

gpconfig -s gp_interconnect_type -v udpifc

statement_mem 默认值：125 MB  建议值：512MB
查看参数配置值：
gpconfig -s statement_mem 
修改参数配置值
gpconfig -c statement_mem -v 512MB

#建议值10240，需要重启GP库
gpconfig -c gp_vmem_protect_limit -v 10240

#查看目前GP库max_connections
#master节点和segment节点是分开的
#本示例master: 250, segment: 750
gpconfig -s max_connections

#查看目前GP库max_prepared_transactions
#该值和max_connections的master节点值是一致的
#本示例master、segment均为250
gpconfig -s max_prepared_transactions

#重设max_connections值
#master: 500, segment: 1000
gpconfig -c max_connections -v 1000 -m 500

#重设max_prepared_transactions值
#master: 500, segment: 500
gpconfig -c max_prepared_transactions -v 100

#会在当前目录生成一个recov文件，里面包含了要恢复的节点信息
1. gprecoverseg -o ./recov 

#该命令执行为异步过程，可以通过gpstate -s查看执行的进度
2. gprecoverseg -i ./recov

#通过sql查询所有的status为'u'，所有的`mode`为's'表示所有segment正常
3.select * from gp_segment_configuration order by dbid;

select
 c.oid,
 n.nspname as schemaname,
 c.relname as tablename,
 pg_get_table_distributedby(c.oid) distributedby,
 case c.relstorage
  when 'a' then ' append-optimized'
  when 'c' then 'column-oriented'
  when 'h' then 'heap'
  when 'v' then 'virtual'
  when 'x' then 'external table'
 end as "data storage mode"
from pg_class as c
inner join pg_namespace as n
 on c.relnamespace = n.oid
where
 n.nspname = 'poc'
 and c.relstorage = 'c'
order by n.nspname, c.relname ;

CREATE OR REPLACE FUNCTION "public"."uuid_python"()
    RETURNs "pg_catalog"."varchar" AS $BODY$
        import uuid
        return uuid.uuid1()
    $BODY$
        LANGUAGE plpythonu VOLATILE
        COST 100

create or replace function "public"."uuid_generate_v1"()
    returns "pg_catalog"."varchar" AS $BODY$
    DECLARE
    BEGIN
        return REPLACE(public.uuid_python()::varchar, '-', '');
    END;
    $BODY$
        LANGUAGE plpgsql VOLATILE
        COST 100