Mysql Cluster概述与部署_MySQL-mysql教程-PHP中文网

首页

数据库

mysql教程

Mysql Cluster概述与部署_MySQL

WBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWB

Jun 01, 2016 pm 01:30 PM

bitsCN.com

Mysql Cluster概述与部署

MySql Cluster最显著的优点就是高可用性,高实时性,高冗余,扩展性强。

它允许在无共享的系统中部署"内存中"数据库的Cluster.通过无共享体系结构,系统能够使用廉价的硬件.此外,由于每个组件有自己的内存和磁盘,所以不存在单点故障.

它由一组计算机构成,每台计算机上均运行者多种进程,包括mysql服务器,NDB cluster的数据节点,管理服务启,以及专门的数据访问程序

所有的这些节点构成一个完整的mysql集群体系.数据保存在"NDB存储服务器"的存储引擎中,表(结构)则保存在"mysql服务器"中.应用程序通过"mysql服务器"访问这些数据表,集群管理服务器通过管理工具(ndb_mgmd)来管理"NDB存储服务器".

基本概念

"NDB"是一种"内存中"的存储引擎,它具有可用性高和数据一致性好的特点.下面介绍mysql cluster 节点时,它表示进程.在单台计算机上可以有任意数目的节点.

管理节点(MGM):这类节点的作用是管理mysql cluster内的其他节点,如配置文件和cluster 日志,启动并停止节点,运行备份等.cluster中的每个节点从管理服务器上检索配置数据,并请求管理服务器所在位置的方式.当数据节点内出现新的事件时,节点将关于这类事件的信息传输到管理服务器上,然后,又将这类信息写入cluster日志。由于这类节点负责管理其他节点的配置,所以应在启动其他节点之前首先启动这类节点.MGM节点是用命令"ndb_mgmd"来启动

数据节点(NDB):这类节点用于保存cluster的数据.数据节点的数目与副本的数目相关,是片段的倍数.假设有2个副本,每个副本有2个片段,那么就有4个数据节点.不过没有必要设置多个副本.数据节点是用命令"ndbd"来启动的.

SQL节点：这是用来访问cluster数据的节点.对于MYSQL cluster来说,客户端节点是使用NDB cluster存储引擎的传统Mysql服务器.通常,sql节点使用将"ndbcluster"添加到"my.cnf"后使用"mysqld" 启动

此外,可以有任意数目的cluster客户端进程或应该程序.它们分为两种类型,即标准mysql客户端和管理客户端.

标准mysql客户端:能够从php,perl,c,c++,java,python,ruby等编写的现有mysql应用程序上访问mysql cluster

管理客户端:这类客户端与管理服务器相连,并提供了启动和停止节点,启动和停止消息跟踪,显示节点版本和状态,启动和停止备份等命令.

以下是mysql cluster 架构示意图:

Mysql Cluster概述与部署_MySQL

由于Mysql Cluster采用的是TCP/IP方式连接,并且节点之间的数据传输没有加密,最后使用单独的子网里.

下面来实施部署

为了方便这里我把管理节点,数据节点,sql节点放在一台机器上.

管理节点1 10.1.6.205

数据节点1 10.1.6.203

数据节点2 10.1.6.205

sql节点1 10.1.6.203

sql节点2 10.1.6.205

1.安装(这里安装7.2.6版本)

下载mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz 二进制包(里面包含ndb，mysql)1root@10.1.6.205:~# tar -C /usr/local -xzvf mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz2root@10.1.6.205:/usr/local# ln -s /usr/local/mysql-cluster-gpl-7.2.8-linux2.6-i686 /usr/local/mysql3root@10.1.6.205:/usr/local# cd mysql4root@10.1.6.205:/usr/local/mysql# scripts/mysql_install_db --user=mysql5root@10.1.6.205:/usr/local/mysql# chown -R mysql:mysql /usr/local/mysql同理10.1.6.2032.配置SQL节点和存储NDB节点01root@10.1.6.205:/usr/local/mysql# vim /etc/my.cnf02[mysqld]03basedir=/usr/local/mysql/04datadir=/usr/local/mysql/data/05user=mysql06port=330607socket=/tmp/mysql.sock0809ndbcluster10max_connect_errors=1000011ndb-connectstring=10.1.6.20512connect_timeout = 3001314[mysql_cluster]15ndb-connectstring=10.1.6.205同理10.1.6.2033.配置管理节点01root@10.1.6.205:/usr/local/mysql# vim /opt/cluster/config.ini02[ndbd default]03NoOfReplicas=2   04DataMemory=80M    #分配data storage使用的内存   每个ndb占用05IndexMemory=18M   #分配index storage使用的内存  每个ndb占用0607[tcp default]08portnumber=2205  #ndb监听端口0910#设置管理节点11[ndb_mgmd]12NodeId=113hostname=10.1.6.20514datadir=/opt/cluster  #在MGM上保存日志的目录1516#设置存储节点NDB117[ndbd]18NodeId=219hostname=10.1.6.20320datadir=/usr/local/mysql/data2122#设置存储节点NDB223[ndbd]24NodeId=325hostname=10.1.6.20526datadir=/usr/local/mysql/data2728#设置SQL节点129[mysqld]30NodeId=431hostname=10.1.6.2033233#设置SQL节点234[mysqld]35NodeId=536hostname=10.1.6.20537[mysqld]    #运行任意ip连接38[mysqld]4.启动mysql cluster1)先启动管理节点服务器.2)启动NDB存储节点服务器.3)启动SQL节点服务器.1)执行启动MGM节点进程1root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndb_mgmd -f /opt/cluster/config.ini2MySQL Cluster Management Server mysql-5.5.22 ndb-7.2.6必须用参数-f或--config-file告诉ndb_mgm配置文件config.ini文件所在的位置.2）在2台存储节点服务器上,如果是第一次启动NDB进程的话,必须先执行以下命令:1root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndbd  --initial22013-08-28 23:40:36 [ndbd] INFO     -- Angel connected to &#39;10.1.6.205:1186&#39;32013-08-28 23:40:36 [ndbd] INFO     -- Angel allocated nodeid: 2

注意:仅在首次启动NDB时,或者在备份/恢复或配置文件发生变化且重启NDB时才使用-initial参数.因为该参数会使节点删除由早期NDB实例创建的,用于恢复的任何文件,包括用于恢复的日志文件.

如果不是第一次启动,用以下命令

1root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndbd3)启动SQL节点服务器1root@10.1.6.203:/usr/local/mysql/bin# /usr/local/mysql/bin/mysqld_safe /etc/my.cnf &5.查看各个节点情况01root@10.1.6.205:/usr/local/mysql# /usr/local/mysql/bin/ndb_mgm02-- NDB Cluster -- Management Client --03ndb_mgm> show04Cluster Configuration05---------------------06[ndbd(NDB)] 2 node(s)07id=2    @10.1.6.203  (mysql-5.5.22 ndb-7.2.6, Nodegroup: 0, Master)08id=3    @10.1.6.205  (mysql-5.5.22 ndb-7.2.6, Nodegroup: 0)0910[ndb_mgmd(MGM)] 1 node(s)11id=1    @10.1.6.205  (mysql-5.5.22 ndb-7.2.6)1213[mysqld(API)]   4 node(s)14id=4    @10.1.6.203  (mysql-5.5.22 ndb-7.2.6)15id=5    @10.1.6.205  (mysql-5.5.22 ndb-7.2.6)16id=6 (not connected, accepting connect from any host)17id=7 (not connected, accepting connect from any host)1819ndb_mgm>

6.测试

注意:与没有使用Cluster的Mysql相比,在mysql cluster内操作数据的方式没有太大的区别.操作时注意

1)表必须用engine=NDB或engine=NDBCLUSTER选项创建

2)每个NDB表必须有一个主键.如果在创建表时用户未定义主键,NDB Cluster存储引擎会自动生成隐含的主键.

该隐含键也将占用空间,就像任何其他的表索引一样.由于没有足够的内存来容纳这些自动创建的键,所以很容易出现问题.

在203 sql节点1上创建表

01root@10.1.6.203:/usr/local/mysql/bin# /usr/local/mysql/bin/mysql -uroot -p02mysql> use test;03mysql> create table dave (num int(10)) engine=ndb;04mysql> show create table dave/G;05*************************** 1. row ***************************06       Table: dave07Create Table: CREATE TABLE `dave` (08  `num` int(10) DEFAULT NULL09) ENGINE=ndbcluster DEFAULT CHARSET=latin1101 row in set (0.00 sec)1112mysql> insert into dave13    -> values14    -> (100);15Query OK, 1 row affected (0.01 sec)16mysql> select * from dave;17+------+18| num  |19+------+20|  100 |21+------+然后在205 sql节点2上查看该表1root@10.1.6.205:/usr/local/mysql# /usr/local/mysql/bin/mysql -uroot -p2mysql> use test3mysql> select * from dave;4+------+5| num  |6+------+7|  100 |8+------+测试OK关注一下表1mysql> select * from ndbinfo.memoryusage;2+---------+--------------+--------+------------+----------+-------------+3| node_id | memory_type  | used   | used_pages | total    | total_pages |4+---------+--------------+--------+------------+----------+-------------+5|       2 | Data memory  | 851968 |         26 | 83886080 |        2560 |6|       2 | Index memory | 212992 |         26 | 19136512 |        2336 |7|       3 | Data memory  | 851968 |         26 | 83886080 |        2560 |8|       3 | Index memory | 212992 |         26 | 19136512 |        2336 |注意:使用量写满会访问不了,这时需要调整配置DataMemory,IndexMemory参数.各配置文件都需调整重启生效.7.关闭cluster1root@10.1.6.205:/usr/local/mysql/bin#  /usr/local/mysql/bin/ndb_mgm -e shutdown2Connected to Management Server at: 10.1.6.205:118633 NDB Cluster node(s) have shutdown.4Disconnecting to allow management server to shutdown.再关闭SQL节点mysqld服务1root@10.1.6.203:/usr/local/mysql/bin# /usr/local/mysql/bin/mysqladmin -uroot -p shutdown2Enter password:3130829 02:19:57 mysqld_safe mysqld from pid file /usr/local/mysql/data//debian.pid ended4[1]+  Done                    /usr/local/mysql/bin/mysqld_safe /etc/my.cnf

以上就是mysql cluster初步部署, 之后会写haproxy+keepalive 双机高可用.

bitsCN.com

声明

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn

您什么时候应该使用复合索引与多个单列索引？Apr 11, 2025 am 12:06 AM

在数据库优化中，应根据查询需求选择索引策略：1.当查询涉及多个列且条件顺序固定时，使用复合索引；2.当查询涉及多个列但条件顺序不固定时，使用多个单列索引。复合索引适用于优化多列查询，单列索引则适合单列查询。

如何识别和优化MySQL中的慢速查询？（慢查询日志，performance_schema）Apr 10, 2025 am 09:36 AM

要优化MySQL慢查询，需使用slowquerylog和performance_schema：1.启用slowquerylog并设置阈值，记录慢查询；2.利用performance_schema分析查询执行细节，找出性能瓶颈并优化。

MySQL和SQL：开发人员的基本技能Apr 10, 2025 am 09:30 AM

MySQL和SQL是开发者必备技能。1.MySQL是开源的关系型数据库管理系统，SQL是用于管理和操作数据库的标准语言。2.MySQL通过高效的数据存储和检索功能支持多种存储引擎，SQL通过简单语句完成复杂数据操作。3.使用示例包括基本查询和高级查询，如按条件过滤和排序。4.常见错误包括语法错误和性能问题，可通过检查SQL语句和使用EXPLAIN命令优化。5.性能优化技巧包括使用索引、避免全表扫描、优化JOIN操作和提升代码可读性。

描述MySQL异步主奴隶复制过程。Apr 10, 2025 am 09:30 AM

MySQL异步主从复制通过binlog实现数据同步，提升读性能和高可用性。1)主服务器记录变更到binlog；2)从服务器通过I/O线程读取binlog；3)从服务器的SQL线程应用binlog同步数据。

mysql：简单的概念，用于轻松学习Apr 10, 2025 am 09:29 AM

MySQL是一个开源的关系型数据库管理系统。1）创建数据库和表：使用CREATEDATABASE和CREATETABLE命令。2）基本操作：INSERT、UPDATE、DELETE和SELECT。3）高级操作：JOIN、子查询和事务处理。4）调试技巧：检查语法、数据类型和权限。5）优化建议：使用索引、避免SELECT*和使用事务。

MySQL：数据库的用户友好介绍Apr 10, 2025 am 09:27 AM

MySQL的安装和基本操作包括：1.下载并安装MySQL，设置根用户密码；2.使用SQL命令创建数据库和表，如CREATEDATABASE和CREATETABLE；3.执行CRUD操作，使用INSERT,SELECT,UPDATE,DELETE命令；4.创建索引和存储过程以优化性能和实现复杂逻辑。通过这些步骤，你可以从零开始构建和管理MySQL数据库。

InnoDB缓冲池如何工作，为什么对性能至关重要？Apr 09, 2025 am 12:12 AM

InnoDBBufferPool通过将数据和索引页加载到内存中来提升MySQL数据库的性能。1)数据页加载到BufferPool中，减少磁盘I/O。2)脏页被标记并定期刷新到磁盘。3)LRU算法管理数据页淘汰。4)预读机制提前加载可能需要的数据页。

MySQL：初学者的数据管理易用性Apr 09, 2025 am 12:07 AM

MySQL适合初学者使用，因为它安装简单、功能强大且易于管理数据。1.安装和配置简单，适用于多种操作系统。2.支持基本操作如创建数据库和表、插入、查询、更新和删除数据。3.提供高级功能如JOIN操作和子查询。4.可以通过索引、查询优化和分表分区来提升性能。5.支持备份、恢复和安全措施，确保数据的安全和一致性。

See all articles