ubuntu 18.04下greenplum安装笔记(一)Linux下基础环境的搭建

背景

需要构建一个用于数据仓库的分布式数据库集群。
每一个节点暂时不需要进行备份,同时也不考虑坏掉的情况。
每一个数据节点最好都不用进行过多的配置,安装起来方便。
Greenplum的Shared-Nothing的设计思路很适合我目前的业务场景。

物理环境

4台安装了Linux的主机,安装的操作系统的版本均为Lubuntu 18.04。
其中,我给他们取号了名字:

  • xiaoyao (逍遥)
    • 身份:MyCat节点
    • IP地址:192.168.0.200
  • linger (灵儿)
    • 身份:数据节点1
    • IP地址:192.168.0.201
  • yueru (月如)
    • 身份:数据节点2
    • IP地址:192.168.0.202
  • anu (阿奴)
    • 身份:数据节点3
    • IP地址:192.168.0.203

其中,机器对应的Master和Segment如下分配:
“逍遥”作为Master节点,其他三个节点作为Segment节点,每个机器上配置两个Primary Segment和两个Mirror Segment;同时“阿奴”作为Master Standy节点。

好了。下载来开始安装。

配置网络

首先为每一台lubutu安装所缺的依赖:

sudo apt-get install net-tools vim -y

配置ip地址
进入系统后,点击右下角的网络按钮,再点击“编辑连接...”,会弹出一个网络连接窗口,选择你目前的连接(以xiaoyao为例,我在xiaoyao上面使用的网络连接显示为“有线连接1”)并双击进入,选择弹出窗口上方的“IPv4设置”,然后将“方法(M):”对应的“自动(DHCP)”改为“手动”,并在下方一条静态ip信息(即:点击中间右侧的“添加(A)”),信息如下:

  • 地址:192.168.0.200
  • 子网掩码:255.255.255.0 (或者24)
  • 网关:192.168.0.1

并配置DNS服务器地址为:8.8.8.8

点击右下角保存。重新启动(或者执行命令行指令sudo service network-manager restart),在命令行输入ifconfig,可以看到ip地址已经变为了192.168.0.200。

其他:按照这种方式在linger,yueru,anu上分别配置ip地址192.168.0.201~203。

创建专有用户
为了方便起见,我们为每一台电脑创建一个名为gpadmin的用户,和其对应的名为gpadmin的用户组。
首先,如果电脑上之前存在gpadmin或者gpadmin用户组的话,我们应该先把他们清掉:

sudo groupdel gpadmin
sudo userdel gpadmin

然后重新建一个:

sudo groupadd -g 530 gpadmin
sudo useradd -g 530 -u 530 -m -d /home/gpadmin -s /bin/bash gpadmin

对文件夹进行赋权,为新用户创建密码:

sudo chown -R gpadmin:gpadmin /home/gpadmin/
sudo passwd gpadmin

其他:为其他三台电脑也创建一个用户gpadmin:gpadmin。

配置地址别名
可以通过sudo vim /etc/hosts来进行编辑,然后在文件末尾添加如下信息:

# hosts for greenplum
192.168.0.200 dw-greenplum-1 mdw
192.168.2.201 dw-greenplum-2 sdw1
192.168.0.202 dw-greenplum-3 sdw2
192.168.0.203 dw-greenplum-4 sdw3

其他:在其他三台电脑上追加 .
0同样的内容。

安装ssh服务器
ubuntu默认并没有安装和开启ssh服务器,因此,我们需要:

  1. 确定安装sshd
    sudo apt-get install openssh-server
  2. 检查防火墙设置,关闭防火墙
    sudo nfw disable
  3. 检验是否成功,运行下面的命令
    ssh localhost

有的时候虽然成功了,但还是会出现connection refused的问题,这是,需要查看一下sshd进程是否启动。
运行下面的指令查看是否有sshd进程:
ps -e | grep ssh
有时虽然可以看到sshd,但是还是不能连接成功,这是需要重启一下ssh:
sudo service ssh restart
然后再次连接。

其他:对其他三台电脑也同样方法安装ssh服务器。

配置ssh直接访问
进行操作之前需要切换用户为gpadmin:gpadmin,毕竟我们接下来的操作是要在gpadmin的权限下进行的:

su gpadmin

在xiaoyao上执行如下命令来生成唯一密钥(之后将会scp到另外三台电脑上):

ssh-keygen
cp ~/.ssh/id_isa.pub ~/.ssh/authorized_keys
chomd 600 ~/.ssh/authorized_keys
chmod 700 ~/.ssh/

在其他三台电脑上通过命令:

scp -r gpadmin@mdw:~/.ssh ~/.ssh

然后ssh配置文件拷贝到本地。

接下来,便可以通过在任意一台电脑上以gpadmin的身份执行:

  • ssh gpadmin@mdw,
  • ssh gpadmin@sdw1,
  • ssh gpadmin@sdw2,
  • ssh gpadmin@sdw3

来验证是否可以成功ssh到对方主机并且是免密ssh的了。

posted @ 2018-09-15 22:52  zifeiy  阅读(703)  评论(0编辑  收藏  举报