mysql数据库集群

mysql用来开发中小型项目还是挺好用的,从节约成本的方面来考虑的确是个不错的选择,但是开发并发了比较大的项目显然还是有些吃力的,前几年解决这种问题通常是通过读写分离来优化数据库,因此出现了amoeba这个东西,现在这个东西已经被弃用了反倒是mysql-cluster-gpl用的比较多。但是有关mysql集群的配置还是比较繁琐,好多人弄不出来就放弃了,可怕的是网上很多资料都是转载别人的,都没有经过自己实际的验证,简直就是太坑爹了。这次我打算分享下有关mysql集群的知识。

1  开发准备

下载mysql-cluster-gpl-7.X版本的msi或者exe文件,双击后安装位置随意,安装好之后目录大致如下


2  创建于集群相关的文件目录

(1)在磁盘上建一个文件夹名称随意,在这个文件夹下面建mgm_data、ndb_data、mysqld_data,建好之后从mysql-cluster-gpl的安装目录下的bin目录下面复制ndb_mgm.exe和ndb_mgmd.exe到该目录下

(2)接着在ndb_data下面建ndb1和ndb2两个文件夹,并从mysql-cluster安装目录下的bin文件夹复制ndbd.exe到ndb1和ndb2文件夹下面

(3)然后在mysqld_data下面建mysqld1和mysqld2两个文件夹

(4)从mysql-cluster下面复制data、share目录,并从bin目录下复制mysqld.exe、mysqladmin.exe到mysqld1和mysqld2文件夹下面

(5)接下来创建两个my.ini文件内容如下

第一个:

[MYSQLD]
ndbcluster
datadir=D:/mydatabase/my_cluster/mysqld_data/mysqld1/data
basedir=D:/MySQLCluster
port=5000

datadir配置的是数据库的数据目录,basedir配置的是mysql-cluster的安装目录


第二个:

 

[MYSQLD]
ndbcluster
datadir=D:/mydatabase/my_cluster/mysqld_data/mysqld2/data
basedir=D:/MySQLCluster
port=5001

第一个my.ini放在mysqld1文件夹下面,第二个则放在mysqld2文件夹下面


3 在基本目录下面创建一个名为config.ini的文件内容如下

[MYSQLD]
Id=21 
[MYSQLD]
Id=22
[ndb_mgmd] 
hostname=localhost 
datadir=D:/mydatabase/my_cluster/mgm_data
id=1 
[NDBD DEFAULT] 
NoOfReplicas=2  
DataMemory=80M  
IndexMemory=18M  
[ndbd] 
hostname=localhost 
id=11 
[ndbd] 
hostname=localhost 
id=12 

datadir配置的是管理节点的目录,管理节点对数据节点和数据库服务节点进行统一管理

4 启动管理节点

命令为:ndb_mgmd.exe -f config.ini --initial

第一次启动的时候需要加--initial参数,但是后面启动的时候就不需要了


4 启动数据节点

分别进入每一个数据节点,也就是ndb1和ndb2目录下执行:ndbd -c localhost:1186

以同样的方式启动第二个数据节点


5 启动mysql服务节点

同样的进入mysql服务节点目录也就是mysqld1和mysqld2目录,执行:mysqld.exe --defaults-file=my.ini

还是以相同的方法启动第二个mysql服务节点

以防万一最好进入管理节点输入:ndb_mgm.exe之后在输入show回车,看看节点的状态是否正常

如图这种情况就说明节点都正常

6 接下来的工作就简单了,只需打开图形界面工具,连接5000和5001的数据库,接在在5000的这个mysql上随便建一个数据库并创建一张表,这里需要注意的是表的引擎应该使用ndb才可以。之后添加几条数据,我们可以看到在5001的mysql上也可以看到在5000上创建的数据库,且表的信息一致


为了能顺利执行各种命令,建议使用管理员身份执行命令,否则很有可能出现命令执行不成功的情况

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
在 Kettle 中使用 MySQL 数据库集群与使用单节点 MySQL 数据库并没有太大的区别。只需要在连接 MySQL 数据库时,将连接地址改为 MySQL 集群的负载均衡地址即可。负载均衡地址可以是一个虚拟 IP 地址,或者是一个域名,由负载均衡器来实现请求分发。 当然,如果 MySQL 集群采用了多主模式,即多个 MySQL 节点都可以同时处理写请求,那么需要在 Kettle 中采用分布式事务来保证数据的一致性。具体操作可以参考以下步骤: 1. 在 MySQL 集群中创建一个名为 `trans_test` 的数据库,并在其中创建一个名为 `test` 的数据表,包含 `id` 和 `name` 两个字段。 2. 在 Kettle 中创建一个 Transformation,将一个 CSV 文件中的数据导入到 `test` 表中。其中,CSV 文件的路径为 `/opt/data/test.csv`,数据表的 JDBC 连接 URL 为 `jdbc:mysql://负载均衡地址/trans_test`,用户名和密码为 MySQL 数据库的用户名和密码。 3. 在 Transformation 中添加一个 Transaction 控件,用于实现分布式事务。具体步骤如下: a. 在 Transformation 中添加一个 Database Connection 控件,用于连接 MySQL 数据库。 b. 将 CSV 文件中的数据通过一个 Insert / Update 控件插入到 `test` 表中。在 Insert / Update 控件的属性面板中,选择 `trans_test` 数据库,输入 `INSERT INTO test(id, name) VALUES (?, ?)` 作为 SQL 语句,然后将 `id` 和 `name` 两个字段分别映射到 CSV 文件中的对应字段。 c. 将 Database Connection 控件和 Insert / Update 控件都拖拽到 Transaction 控件内部,形成一个事务。 4. 保存并执行 Transformation,观察数据是否正确插入到 MySQL 集群中。 需要注意的是,由于 MySQL 集群中的不同节点之间存在数据同步的延迟,因此在进行读操作时需要考虑到这一点。如果需要保证读操作的数据一致性,可以采用 MySQL 提供的读写分离功能,将读操作分发到只读节点上。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值