Today, I will bring you an article on how to configure MySQL master-slave replication to achieve MySQL read-write separation. In today's blog post, we implement MySQL master-slave replication based on MySQL 5.6.
1. Server planning
First we need two servers, one as the Master server and one as the Slave server.
The servers I have here are two virtual machines based on VMWare, and the operating system is: CentOS 6.5. The specific plan is as follows:
2. Install the database
Both the Master and Slave servers need to install the MySQL database. For specific installation steps, please refer to the blog post "MySQL———— CentOS6.5 Compile and Install MySQL5.6.16", I will not repeat it here.
3. Master-slave configuration
Starting from MySQL 5.6, there are two ways of master-slave replication: based on log (binlog); based on GTID (global transaction identifier). Here we take the log (binlog)-based method as an example. In addition, MySQL officials also provide tutorials related to MySQL Replication. The link is http://dev.mysql.com/doc/refman/5.6/en/replication.html. It is recommended that you read it.
1. Modify the main database configuration file
Enter the command
vim /etc/my.cnf
[mysqld] server-id=1 log-bin=/data/mysql3306log/mysql-bin sync_binlog=1 binlog_format=mixed #注意：下面这个参数需要修改为服务器内存的70%左右 innodb_buffer_pool_size = 512M innodb_flush_log_at_trx_commit=1 sql_mode=STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION,NO_AUTO_VALUE_ON_ZERO lower_case_table_names=1 log_bin_trust_function_creators=1
Restart mysql after modification:
service mysqld restart
2. Modify the slave database The configuration file
server-id can be configured as a number greater than 1
vim /etc/my.cnf
[mysqld] server-id=2 log-bin=/data/mysql3306log/mysql-bin binlog_format=mixed relay-log=/data/mysql3306log/slave-relay-bin relay-log-index=/data/mysql3306log/slave-relay-bin.index sync_binlog=1 #注意：下面这个参数需要修改为服务器内存的70%左右 innodb_buffer_pool_size = 512M innodb_flush_log_at_trx_commit=1 sql_mode=STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION,NO_AUTO_VALUE_ON_ZERO lower_case_table_names=1 log_bin_trust_function_creators=1
Restart mysql after modification:
service mysqld restart
3. SSH login to the main database
(1) Create an account for master-slave replication on the master database (replace 192.168.0.153 with your slave database IP):
First log in to the MySQL server
mysql -uroot -proot
and then Execute the following command in the MySQL server:
mysql> GRANT REPLICATION SLAVE ON *.* TO 'lyz'@'192.168.0.153' IDENTIFIED BY 'lyz';
(2) The main database locks the table (disable inserting data to obtain the binary log coordinates of the main database):
mysql> FLUSH TABLES WITH READ LOCK;
(3) Then clone a SSH session window, open the MySQL command line in this window:
First log in to the MySQL server
mysql -uroot -proot
Execute the following command
mysql> SHOW MASTER STATUS;
The result is:
mysql> show master status; +------------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +------------------+----------+--------------+------------------+-------------------+ | mysql-bin.000001 | 329 | | | | +------------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec)
Exit MySQL
mysql> exit;
In this example, the binary log file is mysql-bin.000001 and the location is 329. Record these two values and use them later.
(4) Use the mysqldump command on the Master server to create a data snapshot:
#mysqldump -uroot -proot -h127.0.0.1 -P3306 --all-databases --triggers --routines --events >all.sql
# Next, you will be prompted to enter the root password of the mysql database. After the input is completed, if the current database is not large, it will be completed soon. The export is complete.
(5) Unlock the lock table operation of the master data in step (2):
mysql> UNLOCK TABLES;
(6) Copy the all.sql generated in step (4) to the Slave server
scp ./all.sql liuyazhuang153:/data/mysql/backup
4. SSH login to the slave database
(1) Import the snapshot of the master database
# cd /data/mysql/backup # mysql -uroot -proot -h127.0.0.1 -P3306 < all.sql
You will be prompted to enter the root password of the mysql database. After the input is completed, if the current database is not large , the import will be completed soon.
(2) Set the replicated master database information for the slave database (note to modify the values of MASTER_LOG_FILE and MASTER_LOG_POS):
# mysql -uroot -proot mysql> CHANGE MASTER TO MASTER_HOST='192.168.0.152',MASTER_USER='lyz',MASTER_PASSWORD='lyz',MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=329; # 然后启动从数据库的复制线程： mysql> START slave; # 接着查询数据库的slave状态： mysql> SHOW slave STATUS \G # 如果下面两个参数都是Yes，则说明主从配置成功！ Slave_IO_Running: Yes Slave_SQL_Running: Yes
(3) At this point, the MySQL master-slave replication configuration is completed. Next, you can create databases, tables, insert data on the master database, and then check whether the slave database has synchronized these operations
4. Simple management of master-slave synchronization
1. Stop MYSQL synchronization
STOP SLAVE IO_THREAD; #停止IO进程 STOP SLAVE SQL_THREAD; #停止SQL进程 STOP SLAVE; #停止IO和SQL进程
2. Start MYSQL synchronization
START SLAVE IO_THREAD; #启动IO进程 START SLAVE SQL_THREAD; #启动SQL进程 START SLAVE; #启动IO和SQL进程
3. Reset MYSQL synchronization
RESET SLAVE; 清除主从同步参数，它会删除master.info和relay-log.info文件，以及所有的中继日志，并启动一个新的中继日志。 适用重新再次配置一次从库的情况。
4. View MYSQL synchronization status
SHOW SLAVE STATUS;
5. Temporarily skip MYSQL synchronization error
确保数据一致的情况下临时的跳过这个错误操作如下，有可能要多次。 STOP SLAVE; SET GLOBAL SQL_SLAVE_SKIP_COUNTER=1; START SLAVE;
# vi /etc/my.cnf [mysqld] #slave-skip-errors=1062,1053,1146 #跳过指定error no类型的错误 #slave-skip-errors=all #跳过所有错误 这里出现一次1146报错，是因为配置binlog-do-db过滤，出现该配置的BUG问题，所有要慎用binlog-do-db。
5. Appendix
1、Master服务器上MySQL my.cnf完整配置文件
# 以下选项会被MySQL客户端应用读取。 # 注意只有MySQL附带的客户端应用程序保证可以读取这段内容。 # 如果你想你自己的MySQL应用程序获取这些值。 # 需要在MySQL客户端库初始化的时候指定这些选项。 # [client] #password = [your_password] port = 3306 socket = /usr/local/mysql3306/mysql.sock # *** 应用定制选项 *** # # MySQL 服务端 # [mysqld] # 一般配置选项 port = 3306 socket = /usr/local/mysql3306/mysql.sock basedir =/usr/local/mysql3306 datadir = /data/mysql3306db # back_log 是操作系统在监听队列中所能保持的连接数, # 队列保存了在 MySQL 连接管理器线程处理之前的连接. # 如果你有非常高的连接率并且出现 “connection refused” 报错, # 你就应该增加此处的值. # 检查你的操作系统文档来获取这个变量的最大值. # 如果将back_log设定到比你操作系统限制更高的值,将会没有效果 #back_log = 300 # 不在 TCP/IP 端口上进行监听. # 如果所有的进程都是在同一台服务器连接到本地的 mysqld, # 这样设置将是增强安全的方法 # 所有 mysqld 的连接都是通过 Unix Sockets 或者命名管道进行的. # 注意在 Windows下如果没有打开命名管道选项而只是用此项 # (通过 “enable-named-pipe” 选项) 将会导致 MySQL 服务没有任何作用! #skip-networking # MySQL 服务所允许的同时会话数的上限 # 其中一个连接将被 SUPER 权限保留作为管理员登录. # 即便已经达到了连接数的上限. max_connections = 3000 # 每个客户端连接最大的错误允许数量,如果达到了此限制. # 这个客户端将会被 MySQL 服务阻止直到执行了 “FLUSH HOSTS” 或者服务重启 # 非法的密码以及其他在链接时的错误会增加此值. # 查看 “Aborted_connects” 状态来获取全局计数器. max_connect_errors = 100 # 所有线程所打开表的数量. # 增加此值就增加了 mysqld 所需要的文件描述符的数量 # 这样你需要确认在 [mysqld_safe] 中 “open-files-limit” 变量设置打开文件数量允许至少等于 table_cache 的值 table_open_cache = 4096 # 允许外部文件级别的锁. 打开文件锁会对性能造成负面影响 # 所以只有在你在同样的文件上运行多个数据库实例时才使用此选项(注意仍会有其他约束!) # 或者你在文件层面上使用了其他一些软件依赖来锁定 MyISAM 表 #external-locking # 服务所能处理的请求包的最大大小以及服务所能处理的最大的请求大小(当与大的 BLOB 字段一起工作时相当必要) # 每个连接独立的大小，大小动态增加 max_allowed_packet = 128M # 在一个事务中 binlog 为了记录 SQL 状态所持有的 cache 大小 # 如果你经常使用大的,多声明的事务,你可以增加此值来获取更大的性能. # 所有从事务来的状态都将被缓冲在 binlog 缓冲中然后在提交后一次性写入到 binlog 中 # 如果事务比此值大, 会使用磁盘上的临时文件来替代. # 此缓冲在每个连接的事务第一次更新状态时被创建 binlog_cache_size = 4M # 独立的内存表所允许的最大容量. # 此选项为了防止意外创建一个超大的内存表导致永尽所有的内存资源. max_heap_table_size = 128M # 随机读取数据缓冲区使用内存(read_rnd_buffer_size)：和顺序读取相对应， # 当 MySQL 进行非顺序读取（随机读取）数据块的时候，会利用>这个缓冲区暂存读取的数据 # 如根据索引信息读取表数据，根据排序后的结果集与表进行 Join 等等 # 总的来说，就是当数据块的读取需要满足>一定的顺序的情况下，MySQL 就需要产生随机读取，进而使用到 read_rnd_buffer_size 参数所设置的内存缓冲区 read_rnd_buffer_size = 16M # 排序缓冲被用来处理类似 ORDER BY 以及 GROUP BY 队列所引起的排序 # 如果排序后的数据无法放入排序缓冲,一个用来替代的基于磁盘的合并分类会被使用 # 查看 “Sort_merge_passes” 状态变量. # 在排序发生时由每个线程分配 sort_buffer_size = 16M # 此缓冲被使用来优化全联合(FULL JOINS 不带索引的联合). # 类似的联合在极大多数情况下有非常糟糕的性能表现,但是将此值设大能够减轻性能影响. # 通过 “Select_full_join” 状态变量查看全联合的数量 # 当全联合发生时,在每个线程中分配 join_buffer_size = 16M # 我们在 cache 中保留多少线程用于重用 # 当一个客户端断开连接后,如果 cache 中的线程还少于 thread_cache_size,则客户端线程被放入cache 中. # 这可以在你需要大量新连接的时候极大的减少线程创建的开销 # (一般来说如果你有好的线程模型的话,这不会有明显的性能提升.) thread_cache_size = 16 # 此允许应用程序给予线程系统一个提示在同一时间给予渴望被运行的线程的数量. # 此值只对于支持 thread_concurrency() 函数的系统有意义( 例如Sun Solaris). # 你可可以尝试使用 [CPU数量]*(2..4) 来作为 thread_concurrency 的值 thread_concurrency = 8 # 查询缓冲常被用来缓冲 SELECT 的结果并且在下一次同样查询的时候不再执行直接返回结果. # 打开查询缓冲可以极大的提高服务器速度, 如果你有大量的相同的查询并且很少修改表. # 查看 “Qcache_lowmem_prunes” 状态变量来检查是否当前值对于你的负载来说是否足够高. # 注意: 在你表经常变化的情况下或者如果你的查询原文每次都不同, # 查询缓冲也许引起性能下降而不是性能提升. query_cache_size = 128M # 只有小于此设定值的结果才会被缓冲 # 此设置用来保护查询缓冲,防止一个极大的结果集将其他所有的查询结果都覆盖. query_cache_limit = 4M # 被全文检索索引的最小的字长. # 你也许希望减少它,如果你需要搜索更短字的时候. # 注意在你修改此值之后,你需要重建你的 FULLTEXT 索引 ft_min_word_len = 8 # 如果你的系统支持 memlock() 函数,你也许希望打开此选项用以让运行中的 mysql 在在内存高度紧张的时候,数据在内存中保持锁定并且防止可能被 swapping out # 此选项对于性能有益 #memlock # 当创建新表时作为默认使用的表类型, # 如果在创建表示没有特别执行表类型,将会使用此值 #default_table_type = InnoDB # 线程使用的堆大小. 此容量的内存在每次连接时被预留. # MySQL 本身常不会需要超过 64K 的内存 # 如果你使用你自己的需要大量堆的 UDF 函数或者你的操作系统对于某些操作需要更多的堆,你也许需要将其设置的更高一点. thread_stack = 512K # 设定默认的事务隔离级别.可用的级别如下: # READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE transaction_isolation = REPEATABLE-READ # 内部(内存中)临时表的最大大小 # 如果一个表增长到比此值更大,将会自动转换为基于磁盘的表. # 此限制是针对单个表的,而不是总和. tmp_table_size = 128M # 打开二进制日志功能. # 在复制(replication)配置中,作为 MASTER 主服务器必须打开此项 # 如果你需要从你最后的备份中做基于时间点的恢复,你也同样需要二进制日志. log-bin=/data/mysql3306log/mysql-bin binlog-format=mixed # 如果你在使用链式从服务器结构的复制模式 (A->B->C), # 你需要在服务器B上打开此项. # 此选项打开在从线程上重做过的更新的日志, 并将其写入从服务器的二进制日志. #log_slave_updates # 打开全查询日志. 所有的由服务器接收到的查询 (甚至对于一个错误语法的查询) # 都会被记录下来. 这对于调试非常有用, 在生产环境中常常关闭此项. #general_log=ON #general_log_file=/usr/local/mysql/log/mysql.log # 将警告打印输出到错误 log 文件. 如果你对于 MySQL 有任何问题 # 你应该打开警告 log 并且仔细审查错误日志,查出可能的原因. #log_warnings # 记录慢速查询. 慢速查询是指消耗了比 “long_query_time” 定义的更多时间的查询. # 如果 log_long_format 被打开,那些没有使用索引的查询也会被记录. # 如果你经常增加新查询到已有的系统内的话. 一般来说这是一个好主意, #log_slow_queries # 所有的使用了比这个时间(以秒为单位)更多的查询会被认为是慢速查询. # 不要在这里使用“1″, 否则会导致所有的查询,甚至非常快的查询页被记录下来(由于 MySQL 目前时间的精确度只能达到秒的级别). long_query_time = 6 # 在慢速日志中记录更多的信息. # 一般此项最好打开. # 打开此项会记录使得那些没有使用索引的查询也被作为到慢速查询附加到慢速日志里 #log_long_format # 此目录被MySQL用来保存临时文件.例如, # 它被用来处理基于磁盘的大型排序,和内部排序一样. # 以及简单的临时表. # 如果你不创建非常大的临时文件,将其放置到 swapfs/tmpfs 文件系统上也许比较好 # 另一种选择是你也可以将其放置在独立的磁盘上. # 你可以使用”;”来放置多个路径 # 他们会按照 roud-robin 方法被轮询使用. #tmpdir = /tmp # *** 主从复制相关的设置 # 唯一的服务辨识号,数值位于 1 到 2^32-1之间. # 此值在master和slave上都需要设置. # 如果 “master-host” 没有被设置,则默认为1, 但是如果忽略此选项,MySQL不会作为master生效. server-id = 001 sync_binlog=1 # 复制的Slave (去掉master段的注释来使其生效) # # 为了配置此主机作为复制的slave服务器,你可以选择两种方法: # # 1) 使用 CHANGE MASTER TO 命令 (在我们的手册中有完整描述) - # 语法如下: # # CHANGE MASTER TO MASTER_HOST=, MASTER_PORT=, # MASTER_USER=, MASTER_PASSWORD= ; # # 你需要替换掉 , , 等被尖括号包围的字段以及使用master的端口号替换 (默认3306). # # 例子: # # CHANGE MASTER TO MASTER_HOST=’125.564.12.1′, MASTER_PORT=3306, # MASTER_USER=’joe’, MASTER_PASSWORD=’secret’; # # 或者 # # 2) 设置以下的变量. 不论如何, 在你选择这种方法的情况下, 然后第一次启动复制(甚至不成功的情况下, # 例如如果你输入错密码在master-password字段并且slave无法连接), # slave会创建一个 master.info 文件,并且之后任何对于包含在此文件内的参数的变化都会被忽略 # 并且由 master.info 文件内的内容覆盖, 除非你关闭slave服务, 删除 master.info 并且重启slave 服务. # 由于这个原因,你也许不想碰一下的配置(注释掉的) 并且使用 CHANGE MASTER TO (查看上面) 来代替 # # 所需要的唯一id号位于 2 和 2^32 – 1之间 # (并且和master不同) # 如果master-host被设置了.则默认值是2 # 但是如果省略,则不会生效 #server-id = 2 # # 复制结构中的master – 必须 #master-host = # # 当连接到master上时slave所用来认证的用户名 – 必须 #master-user = # # 当连接到master上时slave所用来认证的密码 – 必须 #master-password = # # master监听的端口. # 可选 – 默认是3306 #master-port = # 使得slave只读.只有用户拥有SUPER权限和在上面的slave线程能够修改数据. # 你可以使用此项去保证没有应用程序会意外的修改slave而不是master上的数据 #read_only #*** MyISAM 相关选项 # 关键词缓冲的大小, 一般用来缓冲 MyISAM 表的索引块. # 不要将其设置大于你可用内存的30%, # 因为一部分内存同样被OS用来缓冲行数据 # 甚至在你并不使用 MyISAM 表的情况下, 你也需要仍旧设置起 8-64M 内存由于它同样会被内部临时磁盘表使用. key_buffer_size = 128M # 用来做 MyISAM 表全表扫描的缓冲大小. # 当全表扫描需要时,在对应线程中分配. read_buffer_size = 8M # 当在排序之后,从一个已经排序好的序列中读取行时,行数据将从这个缓冲中读取来防止磁盘寻道. # 如果你增高此值,可以提高很多 ORDER BY 的性能. # 当需要时由每个线程分配 read_rnd_buffer_size = 64M # MyISAM 使用特殊的类似树的 cache 来使得突发插入 # (这些插入是,INSERT … SELECT, INSERT … VALUES (…), (…), …, 以及 LOAD DATA INFILE) 更快. # 此变量限制每个进程中缓冲树的字节数. # 设置为 0 会关闭此优化. # 为了最优化不要将此值设置大于 “key_buffer_size”. # 当突发插入被检测到时此缓冲将被分配. bulk_insert_buffer_size = 256M # 此缓冲当 MySQL 需要在 REPAIR, OPTIMIZE, ALTER 以及 LOAD DATA INFILE 到一个空表中引起重建索引时被分配. # 这在每个线程中被分配.所以在设置大值时需要小心. myisam_sort_buffer_size = 256M # MySQL 重建索引时所允许的最大临时文件的大小 (当 REPAIR, ALTER TABLE 或者 LOAD DATA INFILE). # 如果文件大小比此值更大,索引会通过键值缓冲创建(更慢) myisam_max_sort_file_size = 10G # 如果被用来更快的索引创建索引所使用临时文件大于制定的值,那就使用键值缓冲方法. # 这主要用来强制在大表中长字串键去使用慢速的键值缓冲方法来创建索引. #myisam_max_extra_sort_file_size = 10G # 如果一个表拥有超过一个索引, MyISAM 可以通过并行排序使用超过一个线程去修复他们. # 这对于拥有多个 CPU 以及大量内存情况的用户,是一个很好的选择. myisam_repair_threads = 1 # 自动检查和修复没有适当关闭的 MyISAM 表. myisam_recover # 默认关闭 Federated skip-federated # *** BDB 相关选项 *** # 如果你运行的MySQL服务有BDB支持但是你不准备使用的时候使用此选项. 这会节省内存并且可能加速一些事. #skip-bdb # *** INNODB 相关选项 *** # 如果你的 MySQL 服务包含 InnoDB 支持但是并不打算使用的话, # 使用此选项会节省内存以及磁盘空间,并且加速某些部分 #skip-innodb # 附加的内存池被 InnoDB 用来保存 metadata 信息(5.6中不再推荐使用) # 如果 InnoDB 为此目的需要更多的内存,它会开始从 OS 这里申请内存. # 由于这个操作在大多数现代操作系统上已经足够快, 你一般不需要修改此值. # SHOW INNODB STATUS 命令会显示当先使用的数量. innodb_additional_mem_pool_size = 64M # InnoDB使用一个缓冲池来保存索引和原始数据, 不像 MyISAM. # 这里你设置越大,这能保证你在大多数的读取操作时使用的是内存而不是硬盘,在存取表里面数据时所需要的磁盘 I/O 越少. # 在一个独立使用的数据库服务器上,你可以设置这个变量到服务器物理内存大小的80% # 不要设置过大,否则,由于物理内存的竞争可能导致操作系统的换页颠簸. # 注意在32位系统上你每个进程可能被限制在 2-3.5G 用户层面内存限制, # 所以不要设置的太高. innodb_buffer_pool_size = 6G # InnoDB 将数据保存在一个或者多个数据文件中成为表空间. # 如果你只有单个逻辑驱动保存你的数据,一个单个的自增文件就足够好了. # 其他情况下.每个设备一个文件一般都是个好的选择. # 你也可以配置 InnoDB 来使用裸盘分区 – 请参考手册来获取更多相关内容 innodb_data_file_path = ibdata1:10M:autoextend # 设置此选项如果你希望InnoDB表空间文件被保存在其他分区. # 默认保存在MySQL的datadir中. #innodb_data_home_dir = # 用来同步IO操作的IO线程的数量. # 此值在Unix下被硬编码为8,但是在Windows磁盘I/O可能在一个大数值下表现的更好. innodb_file_io_threads = 8 # 如果你发现 InnoDB 表空间损坏, 设置此值为一个非零值可能帮助你导出你的表. # 从1开始并且增加此值知道你能够成功的导出表. #innodb_force_recovery=1 # 在 InnoDb 核心内的允许线程数量. # 最优值依赖于应用程序,硬件以及操作系统的调度方式. # 过高的值可能导致线程的互斥颠簸. innodb_thread_concurrency = 16 # 如果设置为1 ,InnoDB 会在每次提交后刷新(fsync)事务日志到磁盘上, # 这提供了完整的 ACID 行为. # 如果你愿意对事务安全折衷, 并且你正在运行一个小的事物, 你可以设置此值到0或者2来减少由事务日志引起的磁盘I/O # 0代表日志只大约每秒写入日志文件并且日志文件刷新到磁盘. # 2代表日志写入日志文件在每次提交后,但是日志文件只有大约每秒才会刷新到磁盘上. innodb_flush_log_at_trx_commit = 2 #（说明：如果是游戏服务器，建议此值设置为2；如果是对数据安全要求极高的应用，建议设置为1；设置为0性能最高，但如果发生故障，数据可能会有丢失的危险！ 默认值1的意思是每一次事务提交或事务外的指令都需要把日志写入（flush）硬盘，这是很费时的。特别是使用电池供电缓存（Battery backed up cache）时。 设成2对于很多运用，特别是从MyISAM表转过来的是可以的，它的意思是不写入硬盘而是写入系统缓存。日志仍然会每秒flush到硬盘，所以你一般不会丢失超过1-2秒的更新。 设成0会更快一点，但安全方面比较差，即使MySQL挂了也可能会丢失事务的数据。而值2只会在整个操作系统挂了时才可能丢数据。） # 加速 InnoDB 的关闭. 这会阻止 InnoDB 在关闭时做全清除以及插入缓冲合并. # 这可能极大增加关机时间, 但是取而代之的是 InnoDB 可能在下次启动时做这些操作. #innodb_fast_shutdown # 用来缓冲日志数据的缓冲区的大小. # 当此值快满时, InnoDB 将必须刷新数据到磁盘上. # 由于基本上每秒都会刷新一次,所以没有必要将此值设置的太大(甚至对于长事务而言) innodb_log_buffer_size = 16M # 在日志组中每个日志文件的大小. # 你应该设置日志文件总合大小到你缓冲池大小的25%~100% # 来避免在日志文件覆写上不必要的缓冲池刷新行为. # 不论如何, 请注意一个大的日志文件大小会增加恢复进程所需要的时间. innodb_log_file_size = 512M # 在日志组中的文件总数. # 通常来说2~3是比较好的. innodb_log_files_in_group = 3 # InnoDB 的日志文件所在位置. 默认是 MySQL 的 datadir. # 你可以将其指定到一个独立的硬盘上或者一个RAID1卷上来提高其性能 #innodb_log_group_home_dir # 在 InnoDB 缓冲池中最大允许的脏页面的比例. # 如果达到限额, InnoDB 会开始刷新他们防止他们妨碍到干净数据页面. # 这是一个软限制,不被保证绝对执行. innodb_max_dirty_pages_pct = 90 # InnoDB 用来刷新日志的方法. # 表空间总是使用双重写入刷新方法 # 默认值是 “fdatasync”, 另一个是 “O_DSYNC”. # 一般来说，如果你有硬件 RAID 控制器，并且其独立缓存采用 write-back 机制，并有着电池断电保护，那么应该设置配置为 O_DIRECT # 否则，大多数情况下应将其设为 fdatasync #innodb_flush_method=fdatasync # 在被回滚前,一个 InnoDB 的事务应该等待一个锁被批准多久. # InnoDB 在其拥有的锁表中自动检测事务死锁并且回滚事务. # 如果你使用 LOCK TABLES 指令, 或者在同样事务中使用除了 InnoDB 以外的其他事务安全的存储引擎 # 那么一个死锁可能发生而 InnoDB 无法注意到. # 这种情况下这个 timeout 值对于解决这种问题就非常有帮助. innodb_lock_wait_timeout = 120 # 这项设置告知InnoDB是否需要将所有表的数据和索引存放在共享表空间里（innodb_file_per_table = OFF）或者为每张表的数据单独放在一个.ibd文件（innodb_file_per_table =ON） # 每张表一个文件允许你在drop、truncate或者rebuild表时回收磁盘空间 # 这对于一些高级特性也是有必要的，比如数据压缩,但是它不会带来任何性能收益 innodb_file_per_table = on [mysqldump] # 不要在将内存中的整个结果写入磁盘之前缓存. 在导出非常巨大的表时需要此项 quick max_allowed_packet = 32M [mysql] no-auto-rehash # 仅仅允许使用键值的 UPDATEs 和 DELETEs . #safe-updates [myisamchk] key_buffer = 16M sort_buffer_size = 16M read_buffer = 8M write_buffer = 8M [mysqlhotcopy] interactive-timeout [mysqld_safe] # 增加每个进程的可打开文件数量. # 警告: 确认你已经将全系统限制设定的足够高! # 打开大量表需要将此值设大 open-files-limit = 8192
2、Slave服务器上MySQL my.cnf完整配置文件
# 以下选项会被MySQL客户端应用读取。 # 注意只有MySQL附带的客户端应用程序保证可以读取这段内容。 # 如果你想你自己的MySQL应用程序获取这些值。 # 需要在MySQL客户端库初始化的时候指定这些选项。 # [client] #password = [your_password] port = 3306 socket = /usr/local/mysql3306/mysql.sock # *** 应用定制选项 *** # # MySQL 服务端 # [mysqld] # 一般配置选项 port = 3306 socket = /usr/local/mysql3306/mysql.sock basedir =/usr/local/mysql3306 datadir = /data/mysql3306db # back_log 是操作系统在监听队列中所能保持的连接数, # 队列保存了在 MySQL 连接管理器线程处理之前的连接. # 如果你有非常高的连接率并且出现 “connection refused” 报错, # 你就应该增加此处的值. # 检查你的操作系统文档来获取这个变量的最大值. # 如果将back_log设定到比你操作系统限制更高的值,将会没有效果 #back_log = 300 # 不在 TCP/IP 端口上进行监听. # 如果所有的进程都是在同一台服务器连接到本地的 mysqld, # 这样设置将是增强安全的方法 # 所有 mysqld 的连接都是通过 Unix Sockets 或者命名管道进行的. # 注意在 Windows下如果没有打开命名管道选项而只是用此项 # (通过 “enable-named-pipe” 选项) 将会导致 MySQL 服务没有任何作用! #skip-networking # MySQL 服务所允许的同时会话数的上限 # 其中一个连接将被 SUPER 权限保留作为管理员登录. # 即便已经达到了连接数的上限. max_connections = 3000 # 每个客户端连接最大的错误允许数量,如果达到了此限制. # 这个客户端将会被 MySQL 服务阻止直到执行了 “FLUSH HOSTS” 或者服务重启 # 非法的密码以及其他在链接时的错误会增加此值. # 查看 “Aborted_connects” 状态来获取全局计数器. max_connect_errors = 100 # 所有线程所打开表的数量. # 增加此值就增加了 mysqld 所需要的文件描述符的数量 # 这样你需要确认在 [mysqld_safe] 中 “open-files-limit” 变量设置打开文件数量允许至少等于 table_cache 的值 table_open_cache = 4096 # 允许外部文件级别的锁. 打开文件锁会对性能造成负面影响 # 所以只有在你在同样的文件上运行多个数据库实例时才使用此选项(注意仍会有其他约束!) # 或者你在文件层面上使用了其他一些软件依赖来锁定 MyISAM 表 #external-locking # 服务所能处理的请求包的最大大小以及服务所能处理的最大的请求大小(当与大的 BLOB 字段一起工作时相当必要) # 每个连接独立的大小，大小动态增加 max_allowed_packet = 128M # 在一个事务中 binlog 为了记录 SQL 状态所持有的 cache 大小 # 如果你经常使用大的,多声明的事务,你可以增加此值来获取更大的性能. # 所有从事务来的状态都将被缓冲在 binlog 缓冲中然后在提交后一次性写入到 binlog 中 # 如果事务比此值大, 会使用磁盘上的临时文件来替代. # 此缓冲在每个连接的事务第一次更新状态时被创建 binlog_cache_size = 4M # 独立的内存表所允许的最大容量. # 此选项为了防止意外创建一个超大的内存表导致永尽所有的内存资源. max_heap_table_size = 128M # 随机读取数据缓冲区使用内存(read_rnd_buffer_size)：和顺序读取相对应， # 当 MySQL 进行非顺序读取（随机读取）数据块的时候，会利用>这个缓冲区暂存读取的数据 # 如根据索引信息读取表数据，根据排序后的结果集与表进行 Join 等等 # 总的来说，就是当数据块的读取需要满足>一定的顺序的情况下，MySQL 就需要产生随机读取，进而使用到 read_rnd_buffer_size 参数所设置的内存缓冲区 read_rnd_buffer_size = 16M # 排序缓冲被用来处理类似 ORDER BY 以及 GROUP BY 队列所引起的排序 # 如果排序后的数据无法放入排序缓冲,一个用来替代的基于磁盘的合并分类会被使用 # 查看 “Sort_merge_passes” 状态变量. # 在排序发生时由每个线程分配 sort_buffer_size = 16M # 此缓冲被使用来优化全联合(FULL JOINS 不带索引的联合). # 类似的联合在极大多数情况下有非常糟糕的性能表现,但是将此值设大能够减轻性能影响. # 通过 “Select_full_join” 状态变量查看全联合的数量 # 当全联合发生时,在每个线程中分配 join_buffer_size = 16M # 我们在 cache 中保留多少线程用于重用 # 当一个客户端断开连接后,如果 cache 中的线程还少于 thread_cache_size,则客户端线程被放入cache 中. # 这可以在你需要大量新连接的时候极大的减少线程创建的开销 # (一般来说如果你有好的线程模型的话,这不会有明显的性能提升.) thread_cache_size = 16 # 此允许应用程序给予线程系统一个提示在同一时间给予渴望被运行的线程的数量. # 此值只对于支持 thread_concurrency() 函数的系统有意义( 例如Sun Solaris). # 你可可以尝试使用 [CPU数量]*(2..4) 来作为 thread_concurrency 的值 thread_concurrency = 8 # 查询缓冲常被用来缓冲 SELECT 的结果并且在下一次同样查询的时候不再执行直接返回结果. # 打开查询缓冲可以极大的提高服务器速度, 如果你有大量的相同的查询并且很少修改表. # 查看 “Qcache_lowmem_prunes” 状态变量来检查是否当前值对于你的负载来说是否足够高. # 注意: 在你表经常变化的情况下或者如果你的查询原文每次都不同, # 查询缓冲也许引起性能下降而不是性能提升. query_cache_size = 128M # 只有小于此设定值的结果才会被缓冲 # 此设置用来保护查询缓冲,防止一个极大的结果集将其他所有的查询结果都覆盖. query_cache_limit = 4M # 被全文检索索引的最小的字长. # 你也许希望减少它,如果你需要搜索更短字的时候. # 注意在你修改此值之后,你需要重建你的 FULLTEXT 索引 ft_min_word_len = 8 # 如果你的系统支持 memlock() 函数,你也许希望打开此选项用以让运行中的 mysql 在在内存高度紧张的时候,数据在内存中保持锁定并且防止可能被 swapping out # 此选项对于性能有益 #memlock # 当创建新表时作为默认使用的表类型, # 如果在创建表示没有特别执行表类型,将会使用此值 #default_table_type = InnoDB # 线程使用的堆大小. 此容量的内存在每次连接时被预留. # MySQL 本身常不会需要超过 64K 的内存 # 如果你使用你自己的需要大量堆的 UDF 函数或者你的操作系统对于某些操作需要更多的堆,你也许需要将其设置的更高一点. thread_stack = 512K # 设定默认的事务隔离级别.可用的级别如下: # READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE transaction_isolation = REPEATABLE-READ # 内部(内存中)临时表的最大大小 # 如果一个表增长到比此值更大,将会自动转换为基于磁盘的表. # 此限制是针对单个表的,而不是总和. tmp_table_size = 128M # 打开二进制日志功能. # 在复制(replication)配置中,作为 MASTER 主服务器必须打开此项 # 如果你需要从你最后的备份中做基于时间点的恢复,你也同样需要二进制日志. log-bin=/data/mysql3306log/mysql-bin binlog-format=mixed relay-log=/data/mysql3306log/slave-relay-bin relay-log-index=/data/mysql3306log/slave-relay-bin.index # 如果你在使用链式从服务器结构的复制模式 (A->B->C), # 你需要在服务器B上打开此项. # 此选项打开在从线程上重做过的更新的日志, 并将其写入从服务器的二进制日志. #log_slave_updates # 打开全查询日志. 所有的由服务器接收到的查询 (甚至对于一个错误语法的查询) # 都会被记录下来. 这对于调试非常有用, 在生产环境中常常关闭此项. #general_log=ON #general_log_file=/usr/local/mysql/log/mysql.log # 将警告打印输出到错误 log 文件. 如果你对于 MySQL 有任何问题 # 你应该打开警告 log 并且仔细审查错误日志,查出可能的原因. #log_warnings # 记录慢速查询. 慢速查询是指消耗了比 “long_query_time” 定义的更多时间的查询. # 如果 log_long_format 被打开,那些没有使用索引的查询也会被记录. # 如果你经常增加新查询到已有的系统内的话. 一般来说这是一个好主意, #log_slow_queries # 所有的使用了比这个时间(以秒为单位)更多的查询会被认为是慢速查询. # 不要在这里使用“1″, 否则会导致所有的查询,甚至非常快的查询页被记录下来(由于 MySQL 目前时间的精确度只能达到秒的级别). long_query_time = 6 # 在慢速日志中记录更多的信息. # 一般此项最好打开. # 打开此项会记录使得那些没有使用索引的查询也被作为到慢速查询附加到慢速日志里 #log_long_format # 此目录被MySQL用来保存临时文件.例如, # 它被用来处理基于磁盘的大型排序,和内部排序一样. # 以及简单的临时表. # 如果你不创建非常大的临时文件,将其放置到 swapfs/tmpfs 文件系统上也许比较好 # 另一种选择是你也可以将其放置在独立的磁盘上. # 你可以使用”;”来放置多个路径 # 他们会按照 roud-robin 方法被轮询使用. #tmpdir = /tmp # *** 主从复制相关的设置 # 唯一的服务辨识号,数值位于 1 到 2^32-1之间. # 此值在master和slave上都需要设置. # 如果 “master-host” 没有被设置,则默认为1, 但是如果忽略此选项,MySQL不会作为master生效. server-id = 002 sync_binlog=1 # 复制的Slave (去掉master段的注释来使其生效) # # 为了配置此主机作为复制的slave服务器,你可以选择两种方法: # # 1) 使用 CHANGE MASTER TO 命令 (在我们的手册中有完整描述) - # 语法如下: # # CHANGE MASTER TO MASTER_HOST=, MASTER_PORT=, # MASTER_USER=, MASTER_PASSWORD= ; # # 你需要替换掉 , , 等被尖括号包围的字段以及使用master的端口号替换 (默认3306). # # 例子: # # CHANGE MASTER TO MASTER_HOST=’125.564.12.1′, MASTER_PORT=3306, # MASTER_USER=’joe’, MASTER_PASSWORD=’secret’; # # 或者 # # 2) 设置以下的变量. 不论如何, 在你选择这种方法的情况下, 然后第一次启动复制(甚至不成功的情况下, # 例如如果你输入错密码在master-password字段并且slave无法连接), # slave会创建一个 master.info 文件,并且之后任何对于包含在此文件内的参数的变化都会被忽略 # 并且由 master.info 文件内的内容覆盖, 除非你关闭slave服务, 删除 master.info 并且重启slave 服务. # 由于这个原因,你也许不想碰一下的配置(注释掉的) 并且使用 CHANGE MASTER TO (查看上面) 来代替 # # 所需要的唯一id号位于 2 和 2^32 – 1之间 # (并且和master不同) # 如果master-host被设置了.则默认值是2 # 但是如果省略,则不会生效 #server-id = 2 # # 复制结构中的master – 必须 #master-host = # # 当连接到master上时slave所用来认证的用户名 – 必须 #master-user = # # 当连接到master上时slave所用来认证的密码 – 必须 #master-password = # # master监听的端口. # 可选 – 默认是3306 #master-port = # 使得slave只读.只有用户拥有SUPER权限和在上面的slave线程能够修改数据. # 你可以使用此项去保证没有应用程序会意外的修改slave而不是master上的数据 #read_only #*** MyISAM 相关选项 # 关键词缓冲的大小, 一般用来缓冲 MyISAM 表的索引块. # 不要将其设置大于你可用内存的30%, # 因为一部分内存同样被OS用来缓冲行数据 # 甚至在你并不使用 MyISAM 表的情况下, 你也需要仍旧设置起 8-64M 内存由于它同样会被内部临时磁盘表使用. key_buffer_size = 128M # 用来做 MyISAM 表全表扫描的缓冲大小. # 当全表扫描需要时,在对应线程中分配. read_buffer_size = 8M # 当在排序之后,从一个已经排序好的序列中读取行时,行数据将从这个缓冲中读取来防止磁盘寻道. # 如果你增高此值,可以提高很多 ORDER BY 的性能. # 当需要时由每个线程分配 read_rnd_buffer_size = 64M # MyISAM 使用特殊的类似树的 cache 来使得突发插入 # (这些插入是,INSERT … SELECT, INSERT … VALUES (…), (…), …, 以及 LOAD DATA INFILE) 更快. # 此变量限制每个进程中缓冲树的字节数. # 设置为 0 会关闭此优化. # 为了最优化不要将此值设置大于 “key_buffer_size”. # 当突发插入被检测到时此缓冲将被分配. bulk_insert_buffer_size = 256M # 此缓冲当 MySQL 需要在 REPAIR, OPTIMIZE, ALTER 以及 LOAD DATA INFILE 到一个空表中引起重建索引时被分配. # 这在每个线程中被分配.所以在设置大值时需要小心. myisam_sort_buffer_size = 256M # MySQL 重建索引时所允许的最大临时文件的大小 (当 REPAIR, ALTER TABLE 或者 LOAD DATA INFILE). # 如果文件大小比此值更大,索引会通过键值缓冲创建(更慢) myisam_max_sort_file_size = 10G # 如果被用来更快的索引创建索引所使用临时文件大于制定的值,那就使用键值缓冲方法. # 这主要用来强制在大表中长字串键去使用慢速的键值缓冲方法来创建索引. #myisam_max_extra_sort_file_size = 10G # 如果一个表拥有超过一个索引, MyISAM 可以通过并行排序使用超过一个线程去修复他们. # 这对于拥有多个 CPU 以及大量内存情况的用户,是一个很好的选择. myisam_repair_threads = 1 # 自动检查和修复没有适当关闭的 MyISAM 表. myisam_recover # 默认关闭 Federated skip-federated # *** BDB 相关选项 *** # 如果你运行的MySQL服务有BDB支持但是你不准备使用的时候使用此选项. 这会节省内存并且可能加速一些事. #skip-bdb # *** INNODB 相关选项 *** # 如果你的 MySQL 服务包含 InnoDB 支持但是并不打算使用的话, # 使用此选项会节省内存以及磁盘空间,并且加速某些部分 #skip-innodb # 附加的内存池被 InnoDB 用来保存 metadata 信息(5.6中不再推荐使用) # 如果 InnoDB 为此目的需要更多的内存,它会开始从 OS 这里申请内存. # 由于这个操作在大多数现代操作系统上已经足够快, 你一般不需要修改此值. # SHOW INNODB STATUS 命令会显示当先使用的数量. innodb_additional_mem_pool_size = 64M # InnoDB使用一个缓冲池来保存索引和原始数据, 不像 MyISAM. # 这里你设置越大,这能保证你在大多数的读取操作时使用的是内存而不是硬盘,在存取表里面数据时所需要的磁盘 I/O 越少. # 在一个独立使用的数据库服务器上,你可以设置这个变量到服务器物理内存大小的80% # 不要设置过大,否则,由于物理内存的竞争可能导致操作系统的换页颠簸. # 注意在32位系统上你每个进程可能被限制在 2-3.5G 用户层面内存限制, # 所以不要设置的太高. innodb_buffer_pool_size = 6G # InnoDB 将数据保存在一个或者多个数据文件中成为表空间. # 如果你只有单个逻辑驱动保存你的数据,一个单个的自增文件就足够好了. # 其他情况下.每个设备一个文件一般都是个好的选择. # 你也可以配置 InnoDB 来使用裸盘分区 – 请参考手册来获取更多相关内容 innodb_data_file_path = ibdata1:10M:autoextend # 设置此选项如果你希望InnoDB表空间文件被保存在其他分区. # 默认保存在MySQL的datadir中. #innodb_data_home_dir = # 用来同步IO操作的IO线程的数量. # 此值在Unix下被硬编码为8,但是在Windows磁盘I/O可能在一个大数值下表现的更好. innodb_file_io_threads = 8 # 如果你发现 InnoDB 表空间损坏, 设置此值为一个非零值可能帮助你导出你的表. # 从1开始并且增加此值知道你能够成功的导出表. #innodb_force_recovery=1 # 在 InnoDb 核心内的允许线程数量. # 最优值依赖于应用程序,硬件以及操作系统的调度方式. # 过高的值可能导致线程的互斥颠簸. innodb_thread_concurrency = 16 # 如果设置为1 ,InnoDB 会在每次提交后刷新(fsync)事务日志到磁盘上, # 这提供了完整的 ACID 行为. # 如果你愿意对事务安全折衷, 并且你正在运行一个小的事物, 你可以设置此值到0或者2来减少由事务日志引起的磁盘I/O # 0代表日志只大约每秒写入日志文件并且日志文件刷新到磁盘. # 2代表日志写入日志文件在每次提交后,但是日志文件只有大约每秒才会刷新到磁盘上. innodb_flush_log_at_trx_commit = 2 #（说明：如果是游戏服务器，建议此值设置为2；如果是对数据安全要求极高的应用，建议设置为1；设置为0性能最高，但如果发生故障，数据可能会有丢失的危险！ 默认值1的意思是每一次事务提交或事务外的指令都需要把日志写入（flush）硬盘，这是很费时的。特别是使用电池供电缓存（Battery backed up cache）时。 设成2对于很多运用，特别是从MyISAM表转过来的是可以的，它的意思是不写入硬盘而是写入系统缓存。日志仍然会每秒flush到硬盘，所以你一般不会丢失超过1-2秒的更新。 设成0会更快一点，但安全方面比较差，即使MySQL挂了也可能会丢失事务的数据。而值2只会在整个操作系统挂了时才可能丢数据。） # 加速 InnoDB 的关闭. 这会阻止 InnoDB 在关闭时做全清除以及插入缓冲合并. # 这可能极大增加关机时间, 但是取而代之的是 InnoDB 可能在下次启动时做这些操作. #innodb_fast_shutdown # 用来缓冲日志数据的缓冲区的大小. # 当此值快满时, InnoDB 将必须刷新数据到磁盘上. # 由于基本上每秒都会刷新一次,所以没有必要将此值设置的太大(甚至对于长事务而言) innodb_log_buffer_size = 16M # 在日志组中每个日志文件的大小. # 你应该设置日志文件总合大小到你缓冲池大小的25%~100% # 来避免在日志文件覆写上不必要的缓冲池刷新行为. # 不论如何, 请注意一个大的日志文件大小会增加恢复进程所需要的时间. innodb_log_file_size = 512M # 在日志组中的文件总数. # 通常来说2~3是比较好的. innodb_log_files_in_group = 3 # InnoDB 的日志文件所在位置. 默认是 MySQL 的 datadir. # 你可以将其指定到一个独立的硬盘上或者一个RAID1卷上来提高其性能 #innodb_log_group_home_dir # 在 InnoDB 缓冲池中最大允许的脏页面的比例. # 如果达到限额, InnoDB 会开始刷新他们防止他们妨碍到干净数据页面. # 这是一个软限制,不被保证绝对执行. innodb_max_dirty_pages_pct = 90 # InnoDB 用来刷新日志的方法. # 表空间总是使用双重写入刷新方法 # 默认值是 “fdatasync”, 另一个是 “O_DSYNC”. # 一般来说，如果你有硬件 RAID 控制器，并且其独立缓存采用 write-back 机制，并有着电池断电保护，那么应该设置配置为 O_DIRECT # 否则，大多数情况下应将其设为 fdatasync #innodb_flush_method=fdatasync # 在被回滚前,一个 InnoDB 的事务应该等待一个锁被批准多久. # InnoDB 在其拥有的锁表中自动检测事务死锁并且回滚事务. # 如果你使用 LOCK TABLES 指令, 或者在同样事务中使用除了 InnoDB 以外的其他事务安全的存储引擎 # 那么一个死锁可能发生而 InnoDB 无法注意到. # 这种情况下这个 timeout 值对于解决这种问题就非常有帮助. innodb_lock_wait_timeout = 120 # 这项设置告知InnoDB是否需要将所有表的数据和索引存放在共享表空间里（innodb_file_per_table = OFF）或者为每张表的数据单独放在一个.ibd文件（innodb_file_per_table=ON） # 每张表一个文件允许你在drop、truncate或者rebuild表时回收磁盘空间 # 这对于一些高级特性也是有必要的，比如数据压缩,但是它不会带来任何性能收益 innodb_file_per_table = on [mysqldump] # 不要在将内存中的整个结果写入磁盘之前缓存. 在导出非常巨大的表时需要此项 quick max_allowed_packet = 32M [mysql] no-auto-rehash # 仅仅允许使用键值的 UPDATEs 和 DELETEs . #safe-updates [myisamchk] key_buffer = 16M sort_buffer_size = 16M read_buffer = 8M write_buffer = 8M [mysqlhotcopy] interactive-timeout [mysqld_safe] # 增加每个进程的可打开文件数量. # 警告: 确认你已经将全系统限制设定的足够高! # 打开大量表需要将此值设大 open-files-limit = 8192
以上就是MySQL之——MS主从复制(读写分离)实现的内容，更多相关内容请关注PHP中文网（www.php.cn）！
![[Web front-end] Node.js quick start](https://img.php.cn/upload/course/000/000/067/662b5d34ba7c0227.png)
