用 MySQL-Proxy 实现读写分离

  • Gavin Terrill
  • 郭晓刚

2007 年 10 月 17 日

话题:MySQL架构语言 & 开发

MySQL-Proxy, 6 月份发布的MySQL-Proxy 是处在你的 MySQL 数据库客户和服务端之间的程序,它还支持嵌入性脚本语言Lua。这个代理可以用来分析、监控和变换(transform)通信数据,它支持非常广泛的使用场景:

  • 负载平衡和故障转移处理
  • 查询分析和日志
  • SQL 宏(SQL macros)
  • 查询重写(query rewriting)
  • 执行 shell 命令

MySQL Proxy 更强大的一项功能是实现“读写分离(Read/Write Splitting)”。基本的原理是让主数据库处理事务性查询,而从数据库处理 SELECT 查询。数据库复制被用来把事务性查询导致的变更同步到集群中的从数据库。

Jan Kneschke 在《MySQL Proxy learns R/W Splitting》中介绍了这种技巧,他还谈到了连接池的问题:

为了实现读写分离我们需要连接池。我们仅在已打开了到一个后端的一条经过认证的连接的情况下,才切换到该后端。MySQL 协议首先进行握手。当进入到查询 / 返回结果的阶段再认证新连接就太晚了。我们必须保证拥有足够的打开的连接才能保持运作正常。

实现读写分离的 LUA 脚本是简单明了的:

  -- 读写分离

  --

  -- 发送所有的非事务性 SELECT 到一个从数据库

  if is_in_transaction == 0 and

     packet:byte() == proxy.COM_QUERY and

     packet:sub(2, 7) == "SELECT" then

    local max_conns = -1

    local max_conns_ndx = 0

    for i = 1, #proxy.servers do



      local s = proxy.servers[i]

      -- 选择一个拥有空闲连接的从数据库



      if s.type == proxy.BACKEND_TYPE_RO and

         s.idling_connections > 0 then

        if max_conns == -1 or

           s.connected_clients < max_conns then

          max_conns = s.connected_clients

          max_conns_ndx = i

        end

      end

    end

    -- 我们找到了一个拥有空闲连接的从数据库



    if max_conns_ndx > 0 then

      proxy.connection.backend_ndx = max_conns_ndx

    end

  else

    -- 发送到主数据库

  end

  return proxy.PROXY_SEND_QUERY



Jan 提醒说这个技巧还可以用来实现其他的数据分布策略,例如分片(Sharding)。

查看英文原文:Read/Write Splitting with MySQL-Proxy
MySQL架构语言 & 开发