首頁 >資料庫 >mysql教程 >MySQL優化之-叢集搭建程式碼步驟詳解(圖)

MySQL優化之-叢集搭建程式碼步驟詳解(圖)

黄舟
黄舟原創
2017-03-10 10:54:251124瀏覽

1 概述


MySQL Cluster 是MySQL 適合於分散式運算環境的高實用、可拓展、高效能、高冗餘版本,其研發設計的初衷就是要滿足許多產業裡最嚴酷的應用要求,這些應用中經常要求資料庫運作的可靠性要達到99.999%。 MySQL Cluster允許在無共享的系統中部署「記憶體中」資料庫集群,透過無共享體系結構,系統能夠使用廉價的硬件,而且對軟硬體沒有特殊要求。此外,由於每個元件有自己的記憶體和磁碟,所以不存在單點故障。

實際上,MySQL叢集是把一個叫做NDB的記憶體叢集儲存引擎整合與標準的MySQL伺服器整合。它包含一組計算機,每個都跑一個或多個進程,這可能包括一個MySQL伺服器,一個資料節點,一個管理伺服器和一個專有的一個資料存取程式。

MySQL Cluster能夠使用多種故障切換和負載平衡選項來配置NDB儲存引擎,但在Cluster 層級上的儲存引擎上做這個最簡單。以下為MySQL叢集結構關係圖,


 

MySQL從結構來看,由3類節點(電腦或流程)組成,分別是:

管理節點:用於提供整個叢集其他節點設定、管理、仲裁等功能。理論上透過一台伺服器提供服務就可以了。

資料節點:MySQL Cluster的核心,儲存資料、日誌,提供資料的各種管理服務。 2個以上 時就能實現叢集的高可用保證,DB節點增加時,叢集的處理速度會變慢。

SQL節點(API):用於存取MySQL Cluster數據,提供對外應用服務。增加 API 節點會提高整個叢集的並發存取速度和整體的吞吐量,該節點 可以部署在Web應用伺服器上,也可以部署在專用的伺服器上,也開以和DB部署在 同一台伺服器上。

2 NDB引擎


MySQL Cluster 使用了一個專用的基於記憶體的儲存引擎-NDB引擎,這樣做的好處是速度快, 沒有磁碟I/O的瓶頸,但由於是基於記憶體的,所以資料庫的規模受系統總記憶體的限制, 如果運行NDB的MySQL伺服器一定要記憶體夠大,例如4G, 8G, 甚至16G。 NDB引擎是分散式的,它可以配置在多台伺服器上來實現資料的可靠性和擴展性,理論上透過配置2台NDB的儲存節點就能實現整個資料庫叢集的冗餘性和解決單點故障問題。


2.1 缺陷


  • 基於內存,資料庫的規模受群集總記憶體的大小限制

    基於內存,斷電後資料可能會有資料遺失,這點還需要通過測試驗證。

    多個節點透過網路實現通訊和資料同步、查詢等操作,因此整體性受網路速度影響,

    因此速度也比較慢

    ## 

    #2.2 優點


    • 多個節點之間可以分佈在不同的地理位置,因此也是實現分散式資料庫的方案。

      擴充功能很好,增加節點即可實現資料庫叢集的擴充。

      冗餘性很好,多個節點上都有完整的資料庫數據,因此任何一個節點宕機都不會造成服務中斷。

      實現高可用性的成本比較低,不像傳統的高可用方案一樣需要共享的存儲設備和專用的軟體才能實現,NDB 只要有足夠的內存就能實現。

二、叢集建立

將建立一個最簡化的MySQL Cluster系統,設定方法中的所有指令都是以root帳號執行。這個MySQL Cluster包含一個管理結點、兩個資料結點、兩個SQL結點,這五個結點會分別安裝在五個虛擬機器上,虛擬機器的名稱和IP如下圖:

192.168.124.143

#管理結點

mysql-mgm

#192.168.124.141

資料結點 1

##mysql-ndbd-1

192.168.124.142

##資料結點#2

#mysql-ndbd-2

#SQL結點

1

mysql-sql-1

######192.168.124.144##########

SQL結點##2

mysql-sql-2

192.168.124.145

  

#請在三台虛擬機器上分別設定此處的設定項目。

1. 安裝虛擬機器

虛擬機作業系統安裝CentOS 6.4的x86_64版本,使用NAT網絡,並且還要安裝vmware-tools,具體安裝方法此處不詳述。

2. 拷貝mysql cluster

下載以下版本的MySQL-Cluster:下載得到的壓縮封包拷貝至虛擬機器的/root/Downloads目錄,然後在shell中執行下列指令:
http://www.php.cn/

##

cd /root/Downloads
tar -xvzf mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz
mv mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64 /usr/local/mysql

3. 關閉安全性原則關閉iptables防火牆(或開啟防火牆的1186、3306埠),在Shell中執行下列指令:

chkconfig --level 35 iptables off
關閉SELinux,在Shell中執行以下命令:

gedit /etc/selinux/config
將config檔中的SELINUX項目改為disabled,修改後的config檔的內容如下:

# This file controls the state of SELinux on the system.
# SELINUX= can take one of these three values:
#     enforcing - SELinux security policy is enforced.
#     permissive - SELinux prints warnings instead of enforcing.
#     disabled - No SELinux policy is loaded.
SELINUX=disabled
# SELINUXTYPE= can take one of these two values:
#     targeted - Targeted processes are protected,
#     mls - Multi Level Security protection.
SELINUXTYPE=targeted

最後重啟系統

二、組態管理結點(192.168.124.141)

1. 設定config.ini設定檔
mkdir /var/lib/mysql-cluster
cd /var/lib/mysql-cluster
gedit config.ini

在shell中執行以下指令:

設定檔config.ini內容如下:

[ndbd default]
NoOfReplicas=2
DataMemory=80M
IndexMemory=18M
[ndb_mgmd]
NodeId=1
hostname=192.168.124.141
datadir=/var/lib/mysql-cluster
[ndbd]
NodeId=2
hostname=192.168.124.142
datadir=/usr/local/mysql/data
[ndbd]NodeId=3hostname=192.168.124.143datadir=/usr/local/mysql/data
[mysqld]NodeId=4hostname=192.168.124.144
[mysqld]
NodeId=5
hostname=192.168.124.145

2. 安裝管理結點#安裝管理節點,不需要mysqld二進位文件,只需要MySQL Cluster服務端程式(ndb_mgmd )和監聽客戶端程式(ndb_mgm)。在shell中執行以下命令:

cp /usr/local/mysql/bin/ndb_mgm* /usr/local/bin
cd /usr/local/bin
chmod +x ndb_mgm*

#三、設定資料結點(192.168.124.142、192.168.124.143)

1. 新增mysql群組和使用者在shell中執行以下指令:

groupadd mysql
useradd -g mysql mysql

#2. 配置 my.cnf設定檔在shell中執行以下命令:

gedit /etc/my.cnf
#設定檔my.cnf的內容如下:

[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/sock/mysql.sock
user=mysql
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
[mysqld_safe]
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
[mysql_cluster]
ndb-connectstring=192.168.124.141

#3. 建立系統資料庫在shell中執行以下指令:

cd /usr/local/mysql
mkdir sock
scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data

#4. 設定資料目錄在shell中執行以下指令:

chown -R root .
chown -R mysql.mysql /usr/local/mysql/data
chown -R mysql.mysql /usr/local/mysql/sock
chgrp -R mysql .

5. 配置MySQL服務

##在shell中執行以下指令:

cp support-files/mysql.server /etc/rc.d/init.d/
chmod +x /etc/rc.d/init.d/mysql.server
chkconfig --add mysql.server

## SQL結點(
192.168.124.144

、192.168.124.145)1. 新增mysql群組和使用者

####1. 新增mysql群組和使用者##### #####在shell中執行以下指令:###############
groupadd mysql
useradd -g mysql mysql
##################2. 配置my .cnf設定檔#########在shell中執行以下命令:################
gedit /etc/my.cnf
################################################# #設定檔my.cnf的內容如下:###############
[client]
socket=/usr/local/mysql/sock/mysql.sock
[mysqld]
ndbcluster
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/sock/mysql.sock
ndb-connectstring=192.168.124.141
[mysql_cluster]
ndb-connectstring=192.168.124.141
##################3. 建立系統資料庫# ########在shell中執行以下指令:###############
cd /usr/local/mysql
mkdir sock
scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data
############

4. 设置数据目录

在shell中运行以下命令:

chown -R root .
chown -R mysql.mysql /usr/local/mysql/data
chown -R mysql.mysql /usr/local/mysql/sock
chgrp -R mysql .

5. 配置MySQL服务

在shell中运行以下命令:

cp support-files/mysql.server /etc/rc.d/init.d/
chmod +x /etc/rc.d/init.d/mysql.server
chkconfig --add mysql.server

五、Cluster环境启动

注意启动顺序:首先是管理节点,然后是数据节点,最后是SQL节点。

1. 启动管理结点

在shell中运行以下命令:

ndb_mgmd -f /var/lib/mysql-cluster/config.ini

还可以使用ndb_mgm来监听客户端,如下:

ndb_mgm

2. 启动数据结点

首次启动,则需要添加--initial参数,以便进行NDB节点的初始化工作。在以后的启动过程中,则是不能添加该参数的,否则ndbd程序会清除在之前建立的所有用于恢复的数据文件和日志文件。

/usr/local/mysql/bin/ndbd --initial

如果不是首次启动,则执行下面的命令。

/usr/local/mysql/bin/ndbd

3. 启动SQL结点

若MySQL服务没有运行,则在shell中运行以下命令:

/usr/local/mysql/bin/mysqld_safe --user=mysql &

4. 启动测试

查看管理节点,启动成功:

六、集群测试

1. 测试一

现在我们在其中一个SQL结点上进行相关数据库的创建,然后到另外一个SQL结点上看看数据是否同步。

在SQL结点1(192.168.124.144)上执行:

shell> /usr/local/mysql/bin/mysql -u root -p
mysql>show databases;
mysql>create database aa;
mysql>use aa;
mysql>CREATE TABLE ctest2 (i INT) ENGINE=NDB; //这里必须指定数据库表的引擎为NDB,否则同步失败
mysql> INSERT INTO ctest2 () VALUES (1);
mysql> SELECT * FROM ctest2;

然后在SQL结点2上看数据是否同步过来了

经过测试,在非master上创建数据,可以同步到master上

查看表的引擎是不是NDB,>show create table 表名;

2. 测试二

关闭一个数据节点 ,在另外一个节点写输入,开启关闭的节点,看数据是否同步过来。

首先把数据结点1重启,然后在结点2上添加数据

在SQL结点2(192.168.124.145)上操作如下:

mysql> create database bb;
mysql> use bb;
mysql> CREATE TABLE ctest3 (i INT) ENGINE=NDB;
mysql> use aa;
mysql> INSERT INTO ctest2 () VALUES (3333);
mysql> SELECT * FROM ctest2;

等数据结点1启动完毕,启动数据结点1的服务

#/usr/local/mysql/bin/ndbd --initial#service mysqld start


然后登录进去查看数据

# /usr/local/mysql/bin/mysql -u root –p


可以看到数据已经同步过来了,说明数据可以双向同步了。

七、关闭集群

1. 关闭管理节点和数据节点,只需要在管理节点(ClusterMgm--134)里执行:

shell> /usr/local/mysql/bin/ndb_mgm -e shutdown

显示

Connected to Management Server at: localhost:1186
2 NDB Cluster node(s) have shutdown.
Disconnecting to allow management server to shutdown.

2. 然后关闭Sql节点(135,136),分别在2个节点里运行:

shell> /etc/init.d/mysql.server stop
Shutting down MySQL... SUCCESS!

注意:要再次启动集群,就按照第五部分的启动步骤即可,不过这次启动数据节点的时候就不要加”-initial”参数了。


以上是MySQL優化之-叢集搭建程式碼步驟詳解(圖)的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn