MySQL数据归档的几种操作方法介绍
使用MySQL的过程，经常会遇到一个问题，比如说某张”log”表，用于保存某种记录，随着时间的不断的累积数据，但是只有最新的一段时间的数据是有用的；这个时候会遇到性能和容量的瓶颈，需要将表中的历史数据进行归档。下面来说说几种常见的数据归档方式。 一、使用分区，再利用分区交换技术能够很好地把指定分区中的数据移动到指定表中，这个需要在项目……
MySQL表分区详解
一、MySQL分区表介绍 分区是一种表的设计模式，正确的分区可以极大地提升数据库的查询效率，完成更高质量的SQL编程。但是如果错误地使用分区，那么分区可能带来毁灭性的的结果。 分区功能并不是在存储引擎层完成的，因此不只有InnoDB存储引擎支持分区，常见的存储引擎MyISAM、NDB等都支持分区。但是并不是所有的存储引擎都支持，如CSV、FEDORATED、……
从原则、方案、策略及难点阐述分库分表
一、分库分表原则 关系型数据库本身比较容易成为系统性能瓶颈，单机存储容量、连接数、处理能力等都很有限，数据库本身的“有状态性”导致了它并不像Web和应用服务器那么容易扩展。在互联网行业海量数据和高并发访问的考验下，聪明的技术人员提出了分库分表技术（有些地方也称为Sharding、分片）。同时，流行的分布式系统中间件（例如MongoDB、ElasticSear……
MySQL读写IO的操作过程解析
数据库作为存储系统，所有业务访问数据的操作都会转化为底层数据库系统的IO行为（缓存系统也可以当做是key-value的数据库）,本文主要介绍访问MySQL数据库的IO流程以及IO相关的参数。 一、MySQL的文件 首先简单介绍一下MySQL的数据文件，MySQL 数据库包含如下几种文件类型： 1）数据文件 (datafile) 存放表中的具体数据的文件。 2……
MySQL基于MHA高可用测试篇（Binlog模式）
一、环境准备 下面来测试MHA提供的各种功能，包括自动切换、手动切换、在线切换三种常用模式。下面是MHA manager的启动配置。 [root@mha ~]# cat /etc/masterha/app1.cnf [server default] manager_log=/var/log/masterha/app1/ma……
MySQL基于MHA高可用部署篇（Binlog模式）
一、部署MHA前提要求（必须满足） 1. SSH公钥认证 基本上MHA manager，MNA node，以及二次检测的节点，都需要互相信任。如果slave比较多，实例比较多，最好提高下 /etc/ssh/sshd_config MaxStartups 的值（默认是10）。 2. 操作系统 仅在Linux上测试过。 3. 单写master和多slave或者只……
MySQL基于MHA高可用部署篇（GTID模式）
一、GTID与MHA MHA是被广泛使用MySQL HA组件，MHA 0.56以后支持基于GTID的复制。 MHA在failover时会自动判断是否是GTID based failover，需要满足下面3个条件即为GTID based failover。 所有节点gtid_mode=1 所有节点Executed_Gtid_Set不为空 至少一个节点Auto……
MySQL基于MHA高可用理论篇
一、MySQL高可用系统 MySQL高可用，顾名思义就是当MySQL主机或服务发生任何故障时能够立马有其他主机顶替其工作，并且最低要求是要保证数据一致性。因此，对于一个MySQL高可用系统需要达到的目标有以下几点： 数据一致性保证这个是最基本的同时也是前提，如果主备的数据的不一致，那么切换就无法进行，当然这里的一致性也是一个相对的，但是要做到最终一致性。 ……
MySQL基于MHA高可用源码篇
一、MHA在Binlog模式下切换过程解析 Phase 1: Configuration Check Phase init_config()：初始化配置 MHA::ServerManager::init_binlog_server：初始化binlog server check_settings()：检查相关配置 a. c……
MySQL基于MHA+VIP部署篇
本章节基于：MySQL基于MHA高可用部署篇（二） 通过上一个章节实验，我们知道mha可以正常切换主从，但是当mysql正常切换之后，应用中是无法正常自动切换的，这时就需要vip了。VIP配置可以采用两种方式，一种通过keepalived的方式管理虚拟ip的浮动；另外一种通过脚本方式启动虚拟ip的方式（即不需要keepalived或者heartbeat类似的……
Raft和Paxos在分布式存储系统中的应用差异
作者简介：简怀兵 数据库技术爱好者，在分布式存储领域有一定经验。 最新在看Group Replication(简称GR)的代码，从Codeship的Galera到MariaDB Galera Cluster/Percona XtrDB Cluster的多主集群技术，再到如今的GR; 分布式存储系统，尤其是分布式的RDBMS必然是未来的趋势。其中最本质和最难的……