OceanBase安装部署

服务器类型

数量

功能最低配置

OCP管控服务器

1台

32C，128G，1.5TB 存储

OceanBase计算服务器

3台

32C，128G，1.2TB 存储

文件名

说明

t-oceanbase-antman-1.3.6-1919351.alios7.x86_64.rpm

OTA（OceanBase自动化步骤工具）

OBP173_20200603_1923.tar.gz

OBProxy镜像文件，只给OCP用，放在/root/t-oceanbase-antman下

OB2251_x86_20200827_2038.tar

OB数据库镜像文件，只给OCP做元数据用,放在/root/t-oceanbase-antman/下

oceanbase-2.2.73-20201117154111.el7.x86_64.rpm

OceanBase 软件RPM包文件

obproxy-1.7.6.2-1903614.el7.x86_64.rpm

OBProxy 软件RPM包文件

obclient-1.1.8-20200408152115.el7.alios7.x86_64.rpm

OceanBase客户端RPM包

dbcat-1.1.6-SNAPSHOT (1).tar.gz

用于异构数据库表结构转换

2.4.3-1905047.tar.gz

OCP2.4.3版本的docker镜像放在/root/t-oceanbase-antman/下

oceanbase-client-1.1.1.jar

OceanBase Java连接驱动，支持Oracle和MySQL实例

主机

主机名

IP地址

OCP

ocpserver

192.168.3.2

observer1

ob4

192.168.3.3

observer2

ob5

192.168.3.4

observer3

ob6

192.168.3.5

载点

大小（GB）

用途

磁盘格式

/home

100

各组件运行日志盘

建议ext4

/data/log1

200 (内存大小的3倍）

OCP元数据库OB日志盘

建议ext4

/data/1

100（取决于所需存储的数据大小）

OCP元数据库OB数据盘

建议ext4

/docker

200

docker根目录

建议ext4

总计

600+其它系统空间，总数650+G

载点

大小（GB）

用途

磁盘格式

/home

100

建议ext4

/data/log1

500G（无刚性需求，看保留日志要求）

OCP元数据库OB日志盘

建议ext4

/data/1

1TB（取决于存储的数据大小，现阶段在安装过程中有一个检查要求/data/1必须大于100G，并且必须是一个独立的挂载点）

OCP元数据库OB数据盘

建议ext4

总计

1.6 TB+其它系统空间，总数 约2TB

hostnamectl set-hostname ocpserver

hostnamectl set-hostname ob4

hostnamectl set-hostname ob5

hostnamectl set-hostname ob6

配置/etc/hosts文件

ocpserver        192.168.3.2

ob4        192.168.3.3

ob5        192.168.3.4

ob6        192.168.3.5

1) 关闭防火墙,并开机禁用

systemctl stop firewalld.service

systemctl disable firewalld.service

systemctl status firewalld.service

2) 禁用selinux

sed -i s@SELINUX=enforcing@SELINUX=disabled@g /etc/selinux/config

grep "^SELINUX=" /etc/selinux/config

3) 重启

reboot

4) 检查

systemctl status firewalld.service

iptables -L

getenforce

vi /etc/ntp.conf

注释文件中的以下4行

#server 0.centos.pool.ntp.org iburst

#server 1.centos.pool.ntp.org iburst

#server 2.centos.pool.ntp.org iburst

#server 3.centos.pool.ntp.org iburst

在末行添加NTP服务器IP地址，我这里是本地NTP服务器,就使用OCP主机最为时钟源

server 192.168.3.2

重启NTP服务，预计5~10分钟就会同步，可手动拉同步

systemctl restart ntpd.service

ntpq -p

--检查时间误差

clockdiff 192.168.3.3

clockdiff 192.168.3.4

clockdiff 192.168.3.5

vi /etc/ssh/sshd_config

注释

#PermitRootLogin no

systemctl restart sshd.service

判断系统是否开启了numa 功能

grep -i numa /var/log/dmesg
如果出现了： "No NUMA configuration found" ，则证明是关闭了numa 功能，如果是其他内容，则为开启了numa

--关闭numa

vi /etc/default/grub
在 GRUB_CMDLINE_LINUX 参数的末尾增加 ：numa=off

[root@ob6 clonescripts]# vi /etc/default/grub

GRUB_TIMEOUT=5

GRUB_DISTRIBUTOR="$(sed s, release .*$,,g /etc/system-release)"

GRUB_DEFAULT=saved

GRUB_DISABLE_SUBMENU=true

GRUB_TERMINAL_OUTPUT="console"

GRUB_CMDLINE_LINUX="crashkernel=auto rd.lvm.lv=vg0/lv_root rd.lvm.lv=vg0/lv_swap rhgb quiet numa=off elevator=deadline numa=off"

GRUB_DISABLE_RECOVERY="true"

--重建grub 配置文件

grub2-mkconfig -o /boot/grub2/grub.cfg

--重启操作系统

reboot

## obcluster.conf

##

SINGLE_OCP_MODE=TRUE

################################   根据环境必须修改 / MUST CHANGE ACCORDING ENVIRONMENT   ################################

############  填写机器IP和root/admin密码 / Edit Machine IP and Password Of root/admin  ############

ZONE1_RS_IP=192.168.3.2

OBSERVER01_ROOTPASS=root_password

OBSERVER01_ADMINPASS=admin_password

SSH_PORT=22

############  填写负载均衡配置 / Edit Configuration of Load Balance  ############

# lb_mode: dns/f5/none, default: dns for 3 ocp, none for 1 ocp

lb_mode=none

###### 选择dns模式，请填写DNS基本配置 / Edit Configuration of DNS When Using DNS LB ######

DNS_ZONE_NAME=oceanbase.com

OCP_DNS_VPORT=80

ob_dns_docker_image_package=ob_dns.tar.gz

ob_dns_image_REPO=reg.docker.alibaba-inc.com/antman/ob_dns

ob_dns_image_TAG=OBDNS_x86_20200927_1617

###### 选择f5模式，请填写F5等外部负载均衡配置 / Edit Configuration of F5 When Using External LB ######

OBPROXY_F5_VIP=xxx.xxx.xxx.xxx

OBPROXY_F5_VPORT=3306

OCP_F5_VIP=xxx.xxx.xxx.xxx

OCP_F5_VPORT=80

############  根据服务器CPU、内存设置容器资源编排 / Allocate Container Resources According To Server  ############

OB_docker_cpus=32

OB_docker_memory=128G

OCP_docker_cpus=16

OCP_docker_memory=32G

OBProxy_docker_cpus=8

OBProxy_docker_memory=10G

############  填写OCP各组件容器的版本信息 / Edit Docker Image, Repo And Tag of OCP Components  ############

# OB docker

docker_image_package=OB2251_x86_20200827_2038.tar

OB_image_REPO=reg.docker.alibaba-inc.com/antman/ob-docker

OB_image_TAG=OB2251_x86_20200827_2038

# OCP docker

ocp_docker_image_package=2.4.3-1905047.tar.gz

OCP_image_REPO=reg.docker.alibaba-inc.com/oceanbase/ocp-all-in-one

OCP_image_TAG=2.4.3-1905047

# OBPROXY docker

obproxy_docker_image_package=OBP173_20200603_1923.tar.gz

obproxy_image_REPO=reg.docker.alibaba-inc.com/antman/obproxy

obproxy_image_TAG=OBP173_20200603_1923

############  如果准备部署OMS，请填写OMS基本配置 / Edit Configuration Of OMS When Deploying OMS  ############

OMS_IP=xxx.xxx.xxx.xxx

oms_docker_image_package=oms.feature_1.3.2.202005152240.tar.gz

oms_image_REPO=acs-reg.alipay.com/oceanbase/oms-all-in-one

oms_image_TAG=feature_1.3.2

############  如果准备部署ODC，请填写ODC基本配置 / Edit Configuration Of ODC When Deploying ODC  ############

odc_docker_image_package=odc220.tar.gz

ODC_image_REPO=acs-reg.alipay.com/oceanbase/obodc

ODC_image_TAG=2.2.0

########################################################################################################################

################################   ADVANCED SETTINGS / 基本不用修改  ################################

############  OB、OBPROXY、OCP 高级配置，基本不用修改 / OB, OBPROXY, OCP ADVANCED SETTINGS  ############

######  自动配置，无需修改 / AUTO-CONFIGURATION ######

OBPROXY_VIP=xxx.xxx.xxx.xxx

OBPROXY_VPORT=3306

OCP_VIP=xxx.xxx.xxx.xxx

OCP_VPORT=80

######  自动配置，无需修改 / AUTO-CONFIGURATION ######

OBSERVER01_HOSTNAME=OCP_META_SERVER_1

ZONE1_NAME=META_OB_ZONE_1

##there must be more than half zone within same region

ZONE1_REGION=OCP_META_REGION

MYSQL_PORT=2881

RPC_PORT=2882

OCP_VERSION=xxx

# for observer docker

###### TODO 是否去掉 ######

physical_data_dir=/data/1

physical_log_dir=/data/log1

docker_data_dir=/data/1

docker_log_dir=/data/log1

# for install observer rpm and start observer process

obcluster_name=obcluster

cluster_id=100000

datafile_disk_percentage=90

# for backup nfs info

BACKUP_ENABLE=FALSE

physical_backup_dir=/obbackup

docker_backup_dir=/obbackup

# for ocp docker

OCP_PORT=8080

OCP_container_name=ocp

OCP_METADB_USERNAME=root@ocp_meta

OCP_MONITORDB_USERNAME=root@ocp_monitor

OCP_OBPROXYDB_USERNAME=root@obproxy

OCP_METADB_DBNAME=ocp

OCP_MONITOR_DBNAME=ocp_monitor

IDC_ROOM=am171

DEFAULT_REGION=HANGZHOU

# for ob dns & nginx

OCP_OBPROXY_DNS_NAME=ocp-obproxy

OCP_DNS_NAME=ocp

ob_dns_container_name=ob_dns

DNS_MASTER_IP=$ZONE1_RS_IP

DNS_THIRD_IP=$ZONE3_RS_IP

NGINX_MASTER_IP=$ZONE1_RS_IP

NGINX_PORT=85

# obproxy and paramters

OBPROXY_PORT=2883

obproxy_container_name=obproxy

OBPROXY_APP_NAME_ARG=AntObproxy

OBPROXY_CONFIG_SERVER_URL="http://${OCP_VIP}:${OCP_VPORT}/services?Action=GetObProxyConfig&User_ID=admin&UID=alibaba"

############  OMS 高级配置，基本不用修改 / OMS ADVANCED SETTINGS ############

OMS_PORT=8088

OMS_METADB_USER=root

OMS_METADB_TENANT=oms_tenant

OMS_METADB_DBNAME=oms_meta

oms_container_name=oms

oms_docker_cpus=12

oms_docker_memory=24G

############  ODC 高级配置，基本不用修改 / ODC ADVANCED SETTINGS ############

ODC_PORT=8989

ODC_METADB_USER=root

ODC_METADB_TENANT=odc_meta

ODC_METADB_DBNAME=odc

odc_container_name=odc

odc_docker_cpus=4

odc_docker_memory=8G

########################################################################################################################