《Mysql必讀MySQL Cluster集群的初級部署教程》要點:
本文介紹了Mysql必讀MySQL Cluster集群的初級部署教程,希望對您有用。如果有疑問,可以聯系我們。
MYSQL數據庫Mysql Cluster概述
MYSQL數據庫?? MySql Cluster最顯著的優點便是高可用性,高實時性,高冗余,擴展性強.
MYSQL數據庫?? 它允許在無共享的系統中部署"內存中"數據庫的Cluster.通過無共享體系結構,系統能夠使用廉價的硬件.此外,由于每個組件有本身的內存和磁盤,所以不存在單點故障.
MYSQL數據庫?? 它由一組計算機構成,每臺計算機上均運行者多種進程,包括mysql服務器,NDB cluster的數據節點,管理服務啟,以及專門的數據拜訪程序
MYSQL數據庫?? 所有的這些節點構成一個完整的mysql集群體系.數據保存在"NDB存儲服務器"的存儲引擎中,表(結構)則保存在"mysql服務器"中.應用程序通過"mysql服務器"拜訪這些數據表,集群管理服務器通過管理工具(ndb_mgmd)來管理"NDB存儲服務器".
MYSQL數據庫基本概念
MYSQL數據庫?? "NDB"是一種"內存中"的存儲引擎,它具有可用性高和數據一致性好的特點.下面介紹mysql cluster 節點時,它表示進程.在單臺計算機上可以有任意數目的節點.
MYSQL數據庫??? 管理節點(MGM):這類節點的作用是管理mysql cluster內的其他節點,如配置文件和cluster 日志,啟動并停止節點,運行備份等.cluster中的每個節點從管理服務器上檢索配置數據,并哀求管理服務器所在位置的方式.當數據節點內出現新的事件時,節點將關于這類事件的信息傳輸到管理服務器上,然后,又將這類信息寫入cluster日志.由于這類節點負責管理其他節點的配置,所以應在啟動其他節點之前首先啟動這類節點.MGM節點是用命令"ndb_mgmd"來啟動
MYSQL數據庫??? 數據節點(NDB):這類節點用于保留cluster的數據.數據節點的數目與副本的數目相關,是片段的倍數.假設有2個副本,每個副本有2個片段,那么就有4個數據節點.不過沒有必要設置多個副本.數據節點是用命令"ndbd"來啟動的.
MYSQL數據庫?? SQL節點:這是用來拜訪cluster數據的節點.對于MYSQL cluster來說,客戶端節點是使用NDB cluster存儲引擎的傳統Mysql服務器.通常,sql節點使用將"ndbcluster"添加到"my.cnf"后使用"mysqld" 啟動
MYSQL數據庫?? 此外,可以有任意數目的cluster客戶端進程或應該程序.它們分為兩種類型,即標準mysql客戶端和管理客戶端.
MYSQL數據庫?? 標準mysql客戶端:能夠從php,perl,c,c++,java,python,ruby等編寫的現有mysql應用程序上拜訪mysql cluster
MYSQL數據庫?? 管理客戶端:這類客戶端與管理服務器相連,并提供了啟動和停止節點,啟動和停止消息跟蹤,顯示節點版本和狀態,啟動和停止備份等命令.
MYSQL數據庫?? 以下是mysql cluster 架構示意圖:
MYSQL數據庫
MYSQL數據庫由于Mysql Cluster采用的是TCP/IP方式連接,并且節點之間的數據傳輸沒有加密,最后使用單獨的子網里.
MYSQL數據庫下面來實施部署
MYSQL數據庫為了便利 這里我把管理節點,數據節點,sql節點放在一臺機器上.
MYSQL數據庫管理節點1 10.1.6.205?
MYSQL數據庫數據節點1 10.1.6.203??
MYSQL數據庫數據節點2 10.1.6.205
MYSQL數據庫sql節點1?? 10.1.6.203
MYSQL數據庫sql節點2?? 10.1.6.205
MYSQL數據庫1.安裝(這里安裝7.2.6版本)
MYSQL數據庫下載mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz 二進制包(里面包括ndb,mysql)
MYSQL數據庫
root@10.1.6.205:~# tar -C /usr/local -xzvf mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz
root@10.1.6.205:/usr/local# ln -s /usr/local/mysql-cluster-gpl-7.2.8-linux2.6-i686 /usr/local/mysql
root@10.1.6.205:/usr/local# cd mysql
root@10.1.6.205:/usr/local/mysql# scripts/mysql_install_db --user=mysql
root@10.1.6.205:/usr/local/mysql# chown -R mysql:mysql /usr/local/mysql
同理10.1.6.203
MYSQL數據庫2.配置SQL節點和存儲NDB節點
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql# vim /etc/my.cnf
[mysqld]
basedir=/usr/local/mysql/
datadir=/usr/local/mysql/data/
user=mysql
port=3306
socket=/tmp/mysql.sock
ndbcluster
max_connect_errors=10000
ndb-connectstring=10.1.6.205
connect_timeout = 300
[mysql_cluster]
ndb-connectstring=10.1.6.205
MYSQL數據庫同理10.1.6.203
3.配置管理節點
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql# vim /opt/cluster/config.ini
[ndbd default]
NoOfReplicas=2
DataMemory=80M #分配data storage使用的內存 每個ndb占用
IndexMemory=18M #分配index storage使用的內存 每個ndb占用
[tcp default]
portnumber=2205 #ndb監聽端口
#設置管理節點
[ndb_mgmd]
NodeId=1
hostname=10.1.6.205
datadir=/opt/cluster #在MGM上保留日志的目錄
#設置存儲節點NDB1
[ndbd]
NodeId=2
hostname=10.1.6.203
datadir=/usr/local/mysql/data
#設置存儲節點NDB2
[ndbd]
NodeId=3
hostname=10.1.6.205
datadir=/usr/local/mysql/data
#設置SQL節點1
[mysqld]
NodeId=4
hostname=10.1.6.203
#設置SQL節點2
[mysqld]
NodeId=5
hostname=10.1.6.205
[mysqld] #運行任意ip連接
[mysqld]
MYSQL數據庫4.啟動mysql cluster
MYSQL數據庫1)先啟動管理節點服務器.2)啟動NDB存儲節點服務器.3)啟動SQL節點服務器.
MYSQL數據庫1)執行啟動MGM節點進程
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndb_mgmd -f /opt/cluster/config.ini
MySQL Cluster Management Server mysql-5.5.22 ndb-7.2.6
MYSQL數據庫必需用參數-f或--config-file告訴ndb_mgm配置文件config.ini文件所在的位置.
2)在2臺存儲節點服務器上,如果是第一次啟動NDB進程的話,必需先執行以下命令:
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndbd --initial
2013-08-28 23:40:36 [ndbd] INFO -- Angel connected to '10.1.6.205:1186'
2013-08-28 23:40:36 [ndbd] INFO -- Angel allocated nodeid: 2
MYSQL數據庫注意:僅在首次啟動NDB時,或者在備份/恢復或配置文件發生變化且重啟NDB時才使用-initial參數.因為該參數會使節點刪除由早期NDB實例創建的,用于恢復的任何文件,包含用于恢復的日志文件.
如果不是第一次啟動,用以下命令
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndbd
MYSQL數據庫3)啟動SQL節點服務器
MYSQL數據庫
root@10.1.6.203:/usr/local/mysql/bin# /usr/local/mysql/bin/mysqld_safe /etc/my.cnf &
MYSQL數據庫5.查看各個節點情況
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql# /usr/local/mysql/bin/ndb_mgm
-- NDB Cluster -- Management Client --
ndb_mgm> show
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 @10.1.6.203 (mysql-5.5.22 ndb-7.2.6, Nodegroup: 0, Master)
id=3 @10.1.6.205 (mysql-5.5.22 ndb-7.2.6, Nodegroup: 0)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @10.1.6.205 (mysql-5.5.22 ndb-7.2.6)
[mysqld(API)] 4 node(s)
id=4 @10.1.6.203 (mysql-5.5.22 ndb-7.2.6)
id=5 @10.1.6.205 (mysql-5.5.22 ndb-7.2.6)
id=6 (not connected, accepting connect from any host)
id=7 (not connected, accepting connect from any host)
ndb_mgm>
MYSQL數據庫6.測試
MYSQL數據庫注意:與沒有使用Cluster的Mysql相比,在mysql cluster內操作數據的方式沒有太大的區別.操作時注意
MYSQL數據庫1)表必需用engine=NDB或engine=NDBCLUSTER選項創建
MYSQL數據庫2)每個NDB表必需有一個主鍵.如果在創建表時用戶未定義主鍵,NDB Cluster存儲引擎會自動生成隱含的主鍵.
MYSQL數據庫該隱含鍵也將占用空間,就像任何其他的表索引一樣.由于沒有足夠的內存來容納這些自動創建的鍵,所以很容易出現問題.
MYSQL數據庫在203 sql節點1上創建表
MYSQL數據庫
root@10.1.6.203:/usr/local/mysql/bin# /usr/local/mysql/bin/mysql -uroot -p
mysql> use test;
mysql> create table dave (num int(10)) engine=ndb;
mysql> show create table dave\G;
*************************** 1. row ***************************
Table: dave
Create Table: CREATE TABLE `dave` (
`num` int(10) DEFAULT NULL
) ENGINE=ndbcluster DEFAULT CHARSET=latin1
1 row in set (0.00 sec)
mysql> insert into dave
-> values
-> (100);
Query OK, 1 row affected (0.01 sec)
mysql> select * from dave;
+------+
| num |
+------+
| 100 |
+------+
MYSQL數據庫然后在205 sql節點2上查看該表
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql# /usr/local/mysql/bin/mysql -uroot -p
mysql> use test
mysql> select * from dave;
+------+
| num |
+------+
| 100 |
+------+
MYSQL數據庫測試OK
MYSQL數據庫關注一下表
MYSQL數據庫
mysql> select * from ndbinfo.memoryusage;
+---------+--------------+--------+------------+----------+-------------+
| node_id | memory_type | used | used_pages | total | total_pages |
+---------+--------------+--------+------------+----------+-------------+
| 2 | Data memory | 851968 | 26 | 83886080 | 2560 |
| 2 | Index memory | 212992 | 26 | 19136512 | 2336 |
| 3 | Data memory | 851968 | 26 | 83886080 | 2560 |
| 3 | Index memory | 212992 | 26 | 19136512 | 2336 |
MYSQL數據庫注意:使用量寫滿會拜訪不了,這時需要調整配置DataMemory,IndexMemory參數.各配置文件都需調整重啟生效.
MYSQL數據庫
7.關閉cluster
MYSQL數據庫
root@10.1.6.205:/usr/local/mysql/bin# /usr/local/mysql/bin/ndb_mgm -e shutdown
Connected to Management Server at: 10.1.6.205:1186
3 NDB Cluster node(s) have shutdown.
Disconnecting to allow management server to shutdown.
MYSQL數據庫再關閉SQL節點mysqld服務
MYSQL數據庫
root@10.1.6.203:/usr/local/mysql/bin# /usr/local/mysql/bin/mysqladmin -uroot -p shutdown
Enter password:
130829 02:19:57 mysqld_safe mysqld from pid file /usr/local/mysql/data//debian.pid ended
[1]+ Done /usr/local/mysql/bin/mysqld_safe /etc/my.cnf
MYSQL數據庫以上便是mysql cluster初步部署, 之后會寫haproxy+keepalive 雙機高可用.
維易PHP培訓學院每天發布《Mysql必讀MySQL Cluster集群的初級部署教程》等實戰技能,PHP、MYSQL、LINUX、APP、JS,CSS全面培養人才。