greenplum单节点详细完整安装及使用
安装greenplum单机版:
安装环境准备
1.关闭SELINUX
vim /etc/selinux/config
SELINUX=disabled
2.关闭防火墙
systemctl stop firewalld.service #停止防火墙
systemctl disable firewalld.service #在开机时禁用服务
3.安装单机版GP(1master4segment)
gp安装准备
3.1改机器名
#查机器名
unmame -a
#改名为bigdata
hostnamectl set-hostname bigdata
3.2创建gpaadmin用户和用户组
groupadd -g 3030 gpadmin
1
//mkdir /home/gpdata
useradd -u 3030 gpadmin -g gpadmin -d /home/gpdata
passwd gpadmin
(密码bigdata2018)
#补充知识点:删除 groupdel gpadmin userdel gpadmin
3.3配置内核参数
vim /etc/sysctl.conf
以下面内容覆盖原有内容:
kernel.shmmax = 500000000
kernel.shmmni = 4096
kernel.shmall = 4000000000
kernel.sem = 250 512000 100 2048
kernel.sysrq = 1
kernel.core_uses_pid = 1
kernel.msgmnb = 65536
kernel.msgmax = 65536
kernel.msgmni = 2048
net.ipv4.tcp_syncookies = 1
net.ipv4.conf.default.accept_source_route = 0
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_max_syn_backlog = 4096
net.ipv4.conf.all.arp_filter = 1
net.ipv4.ip_local_port_range = 10000 65535
net.core.netdev_max_backlog = 10000
net.core.rmem_max = 2097152
net.core.wmem_max = 2097152
vm.overcommit_memory = 2
使生效
sysctl -p
3.4 vim /etc/security/limits.conf
以下面内容覆盖:
soft nofile 65536
hard nofile 65536
soft nproc 131072
hard nproc 131072
3.5CentOS7需要加入服务logind
echo “RemoveIPC=no” >> /etc/systemd/logind.conf
service systemd-logind restart
3.6重启服务器reboot
4.gp安装
4.1设置host
vim /etc/hosts
添加:172.16.250.106 bigdata
172.16.250.106 这里更改成你自己的ip地址
vim /etc/sysconfig/network
添加:hostname=bigdata
4.2 gp6安装包上传到root目录
yum -y install greenplum-db-6.2.1-rhel7-x86_64.rpm
#默认安装到/usr/local,授权给gpadmin
chown -R gpadmin /usr/local/greenplum*
chgrp -R gpadmin /usr/local/greenplum*
#设置环境变量
source /usr/local/greenplum-db-6.2.1/greenplum_path.sh
4.3创建instance需要的目录
mkdir -p /home/gpdata
mkdir -p /home/gpdata/master
mkdir -p /home/gpdata/gp1
mkdir -p /home/gpdata/gp2
mkdir -p /home/gpdata/gp3
mkdir -p /home/gpdata/gp4
#修改目录属主
chown -R gpadmin:gpadmin /home/gpdata
chown -R gpadmin:gpadmin /home/gpdata/master
chown -R gpadmin:gpadmin /home/gpdata/gp*
4.4切换用户gpadmin
su gpadmin
进入$开头的bash环境
vim .bash_profile
添加以下:
source /usr/local/greenplum-db-6.2.1/greenplum_path.sh
export MASTER_DATA_DIRECTORY=/home/gpdata/master/gpseg-1
export PGPORT=2345
export PGUSER=gpadmin
export PGDATABASE=gpdb
vim .bashrc
source /usr/local/greenplum-db-6.2.1/greenplum_path.sh
export MASTER_DATA_DIRECTORY=/home/gpdata/master/gpseg-1
export PGPORT=2345
export PGUSER=gpadmin
export PGDATABASE=gpdb
4.5设置子节点的host
在软件安装目录下
vim all_hosts_file
bigdata
添加一行bigdata(单机版只有一个host)
在此,需要安装一个python(见python安装文档)
4.6权限互通
source /usr/local/greenplum-db-6.2.1/greenplum_path.sh
python2.7 bin/gpssh-exkeys -f all_hosts_file
4.7编辑gp初始化文件
vim initgp_config
写入:
SEG_PREFIX=gpseg
PORT_BASE=33000
declare -a DATA_DIRECTORY=(/home/gpdata/gp1 /home/gpdata/gp2 /home/gpdata/gp3 /home/gpdata/gp4)
MASTER_HOSTNAME=bigdata
MASTER_PORT=2345
MASTER_DIRECTORY=/home/gpdata/master
DATABASE_NAME=gpdb
(注:ENCODING=UNICODE 此字符集一定要选择UNICODE)
4.8设置节点服务器
vim seg_hosts_file
写入:
bigdata
本例单机,只有bigdata这一台
4.9初始化GP
bin/gpinitsystem -c initgp_config -h seg_hosts_file
/usr/local/greenplum-db/bin/gpinitsystem -c /usr/local/greenplum-db/initgp_config -h /usr/local/greenplum-db/all_hosts_file
执行初始化命令的时候缺少一个libnsl.so.1
此时修改/etc/ld.so.conf文件
vim /etc/ld.so.conf
include ld.so.conf.d/*.conf
/usr/lib64
/sbin/ldconfig -v
所有缺失的lib包我都放在文件夹中,缺少的lib通过穿件软连接实现
5.连接GP
基本使用
https://www.cnblogs.com/kingle-study/p/10550785.html
登录数据库之前得先将程序运行,执行
bin/gpstart
5.1执行bin/psql -l 查询所有数据库
5.2创建数据库createdb 库名
创建表: CREATE TABLE 表名
bin/psql -d 数据库名 进入指定数据库,接下来就可以执行sql操作了
eg:简单实例:
create table test001(id int,name varchar(128)); --id 为分布键
insert into test001 values (100,‘tom’),(101,‘lily’),(102,‘jack’),(103,‘linda’);
select * from test001;
5.3重新加载配置文件
gpstop -u
附录
其他启停命令
gpstate #查看服务状态
gpstart #正常启动
gpstop #正常关闭
gpstop -M fast #快速关闭
gpstop r #重启
服务器重启后需要在 gpadmin用户下用 gpstart启动gp服务
本文来源:https://blog.csdn.net/bijack/article/details/104023191/
相关文章