mysql群集方案学习资料

周一,2006/08/28-21:43—yejr作/译者：叶金荣（Email:），来源：，转载请注明作/译者和出处，并且不能用于商业用途，违者必究。MySQLCluster是MySQL适合于分布式计算环境的高实用、高冗余版本。它采用了NDBCluster存储引擎，允许在1个Cluster中运行多个MySQL服务器。在MyQL5.0及以上的二进制版本中、以及与最新的Linux版本兼容的RPM中提供了该存储引擎。（注意，要想获得MySQLCluster的功能，必须安装mysql-server和mysql-maxRPM）。目前能够运行MySQLCluster的操作系统有Linux、MacOSX和Solaris（一些用户通报成功地在FreeBSD上运行了MySQLCluster，但MySQLAB公司尚未正式支持该特性）。一、MySQLCluster概述MySQLCluster是一种技术，该技术允许在无共享的系统中部署“内存中”数据库的Cluster。通过无共享体系结构，系统能够使用廉价的硬件，而且对软硬件无特殊要求。此外，由于每个组件有自己的内存和磁盘，不存在单点故障。MySQLCluster由一组计算机构成，每台计算机上均运行着多种进程，包括MySQL服务器，NDBCluster的数据节点，管理服务器，以及（可能）专门的数据访问程序。关于Cluster中这些组件的关系，请参见下图：所有的这些节点构成一个完成的MySQL集群体系。数据保存在“NDB存储服务器”的存储引擎中，表（结构）则保存在“MySQL服务器”中。应用程序通过“MySQL服务器”访问这些数据表，集群管理服务器通过管理工具(ndb_mgmd)来管理“NDB存储服务器”。通过将MySQLCluster引入开放源码世界，MySQL为所有需要它的人员提供了具有高可用性、高性能和可缩放性的Cluster数据管理。二、MySQLCluster基本概念“NDB”是一种“内存中”的存储引擎，它具有可用性高和数据一致性好的特点。MySQLCluster能够使用多种故障切换和负载平衡选项配置NDB存储引擎，但在Cluster级别上的存储引擎上做这个最简单。MySQLCluster的NDB存储引擎包含完整的数据集，仅取决于Cluster本身内的其他数据。目前，MySQLCluster的Cluster部分可独立于MySQL服务器进行配置。在MySQLCluster中，Cluster的每个部分被视为1个节点。管理(MGM)节点：这类节点的作用是管理MySQLCluster内的其他节点，如提供配置数据、启动并停止节点、运行备份等。由于这类节点负责管理其他节点的配置，应在启动其他节点之前首先启动这类节点。MGM节点是用命令“ndb_mgmd”启动的。数据节点：这类节点用于保存Cluster的数据。数据节点的数目与副本的数目相关，是片段的倍数。例如，对于两个副本，每个副本有两个片段，那么就有4个数据节点。不过没有必要设置多个副本。数据节点是用命令“ndbd”启动的。SQL节点：这是用来访问Cluster数据的节点。对于MySQLCluster，客户端节点是使用NDBCluster存储引擎的传统MySQL服务器。通常，SQL节点是使用命令“mysqld–ndbcluster”启动的，或将“ndbcluster”添加到“my.cnf”后使用“mysqld”启动。注释：在很多情况下，术语“节点”用于指计算机，但在讨论MySQLCluster时，它表示的是进程。在单台计算机上可以有任意数目的节点，为此，我们采用术语“Cluster主机”。管理服务器(MGM节点)负责管理Cluster配置文件和Cluster日志。Cluster中的每个节点从管理服务器检索配置数据，并请求确定管理服务器所在位置的方式。当数据节点内出现新的事件时，节点将关于这类事件的信息传输到管理服务器，然后，将这类信息写入Cluster日志。此外，可以有任意数目的Cluster客户端进程或应用程序。它们分为两种类型：标准MySQL客户端：对于MySQLCluster，它们与标准的（非Cluster类）MySQL没有区别。换句话讲，能够从用PHP、Perl、C、C++、Java、Python、Ruby等编写的现有MySQL应用程序访问MySQLCluster。管理客户端：这类客户端与管理服务器相连，并提供了启动和停止节点、启动和停止消息跟踪（仅调试版本）、显示节点版本和状态、启动和停止备份等的命令。三、开始准备1、准备服务器现在，我们计划建立有5个节点的MySQLCLuster体系，因此需要用到5台机器，分别做如下用途：节点(用途)IP地址(主机名)管理节点(MGM)192.168.0.1(db1)SQL节点1(SQL1)192.168.0.2(db2)SQL节点2(SQL2)192.168.0.3(db3)数据节点1(NDBD1)192.168.0.4(db4)数据节点2(NDBD2)192.168.0.5(db5)2、注意事项及其他每个节点的操作系统都是Linux，下面的描述中将使用主机名，不再使用IP地址来表示。由于MySQLCluster采用TCP/IP方式连接，并且节点之间的数据传输没有加密，因此这个体系最好只在单独的子网中运行，并且考虑到传输的速率，强烈建议不要跨越公网使用这个体系。所需的MySQL软件请事先在下载。实际上整个体系可以在一个单独的实体计算机上运行成功，当然了，必须设定不同的目录以及端口等，只能作为测试时使用。四、开始安装1、假定条件在每个节点计算机上都采用nobody用户来运行Cluster，因此执行如下命令添加相关用户（如果已经存在则略过，且用root用户执行）：root#/usr/sbin/groupaddnobodyroot#/usr/sbin/useraddnobody-gnobody假设已经下载了mysql可直接使用的二进制安装包，且放在/tmp下了。2、SQL节点和存储节点(NDB节点)安装(即4个机器重复执行以下步骤)root#cd/tmp/root#tarzxfmysql-max-5.0.24-linux-i686.tar.gzroot#mvmysql-max-5.0.24-linux-i686/usr/local/mysql/root#cd/usr/local/mysql/root#./configure--prefix=/usr/local/mysqlroot#./scripts/mysql_install_dbroot#chown-Rnobody:nobody/usr/local/mysql/3、配置SQL节点root#vi/usr/local/mysql/my.cnf然后输入如下内容：[mysqld]basedir=/usr/local/mysql/datadir=/usr/local/mysql/datauser=nobodyport=3306socket=/tmp/mysql.sockndbclusterndb-connectstring=db1[MYSQL_CLUSTER]ndb-connectstring=db14、配置存储节点(NDB节点)root#vi/usr/local/mysql/my.cnf然后输入如下内容：[mysqld]ndbclusterndb-connectstring=db1[MYSQL_CLUSTER]ndb-connectstring=db15、安装管理节点root#cd/tmp/root#tarzxfmysql-max-5.0.24-linux-i686.tar.gzroot#mkdir/usr/local/mysql/root#mkdir/usr/local/mysql/data/root#cdmysql-max-5.0.24-linux-i686/bin/root#cpndb_mgm*/usr/local/mysql/root#chown-Rnobody:nobody/usr/local/mysql6、配置管理节点root#vi/usr/local/mysql/config.ini然后输入如下内容：[NDBDDEFAULT]NoOfReplicas=1[TCPDEFAULT]portnumber=3306#设置管理节点服务器[NDB_MGMD]hostname=db1#MGM上保存日志的目录datadir=/usr/local/mysql/data/#设置存储节点服务器(NDB节点)[NDBD]hostname=db4datadir=/usr/local/mysql/data/#第二个NDB节点[NDBD]hostname=db5datadir=/usr/local/mysql/data/#设置SQL节点服务器[MYSQLD]hostname=db2#第二个SQL节点[MYSQLD]hostname=db3注释：Cluster管理节点的默认端口是1186，数据节点的默认端口2202。从MySQL5.0.3开始，该限制已被放宽，Cluster能够根据空闲的端口自动地为数据节点分配端口。如果你的版本低于5.0.22，请注意这个细节。五、启动MySQLCluster较为合理的启动顺序是，首先启动管理节点服务器，然后启动存储节点服务器，最后才启动SQL节点服务器：在管理节点服务器上，执行以下命令启动MGM节点进程：root#/usr/local/mysql/ndb_mgmd-f/usr/local/mysql/config.ini必须用参数“-f”或“--config-file”告诉ndb_mgm配置文件所在位置，默认是在ndb_mgmd相同目录下。在每台存储节点服务器上，如果是第一次启动ndbd进程的话，必须先执行以下命令：root#/usr/local/mysql/bin/ndbd--initial注意，仅应在首次启动ndbd时，或在备份/恢复数据或配置文件发生变化后重启ndbd时使用“--initial”参数。因为该参数会使节点删除由早期ndbd实例创建的、用于恢复的任何文件，包括用于恢复的日志文件。如果不是第一次启动，直接运行如下命令即可：root#/usr/local/mysql/bin/ndbd最后，运行以下命令启动SQL节点服务器：root#/usr/local/mysql/bin/mysqld_safe--defaults-file=/usr/local/mysql/my.cnf&如果一切顺利，也就是启动过程中没有任何错误信息出现，那么就在管理节点服务器上运行如下命令：root#/usr/local/mysql/ndb_mgm--NDBCluster--ManagementClient--ndb_mgmSHOWConnectedtoManagementServerat:localhost:1186ClusterConfiguration---------------------[ndbd(NDB)]2node(s)id=2@192.168.0.4(Version:5.0.22,Nodegroup:0,Master)id=3@192.168.0.5(Version:5.0.22,Nodegroup:0)[ndb_mgmd(MGM)]1node(s)id=1@192.168.0.1(Version:5.0.22)[mysqld(SQL)]1node(s)id=2(Version:5.0.22)id=3(Version:5.0.22)具体的输出内容可能会略有不同，这取决于你所使用的MySQL版本。注意：如果你正在使用较早的MySQL版本，你或许会看到引用为‘[mysqld(API)]’的SQL节点。这是一种早期的用法，现已放弃。现在，应能在MySQLCluster中处理数据库，表和数据。六、创建数据库表与没有使用Clust