用MySQL-Proxy实现读写分离

作者 Gavin Terrill 译者 郭晓刚 发布于 2007年10月17日 下午1时6分

社区

Architecture

主题

性能和可伸缩性,

集群与缓存

标签

LAMP,

MySQL

MySQL-Proxy, 6月份发布的MySQL-Proxy是处在你的MySQL数据库客户和服务端之间的程序，它还支持嵌入性脚本语言Lua。这个代理可以用来分析、监控和变换（transform）通信数据，它支持非常广泛的使用场景：

• 负载平衡和故障转移处理
• 查询分析和日志
• SQL宏（SQL macros）
• 查询重写（query rewriting）
• 执行shell命令

MySQL Proxy更强大的一项功能是实现“读写分离（Read/Write Splitting）”。基本的原理是让主数据库处理事务性查询，而从数据库处理SELECT查询。数据库复制被用来把事务性查询导致的变更同步到集群中的从数据库。

Jan Kneschke在《MySQL Proxy learns R/W Splitting》中介绍了这种技巧，他还谈到了连接池的问题：

为了实现读写分离我们需要连接池。我们仅在已打开了到一个后端的一条经过认证的连接的情况下，才切换到该后端。MySQL协议首先进行握手。当进入到查询/返回结果的阶段再认证新连接就太晚了。我们必须保证拥有足够的打开的连接才能保持运作正常。

实现读写分离的LUA脚本是简单明了的：

  -- 读写分离
  --
  -- 发送所有的非事务性SELECT到一个从数据库
  if is_in_transaction == 0 and
     packet:byte() == proxy.COM_QUERY and
     packet:sub(2, 7) == "SELECT" then
    local max_conns = -1
    local max_conns_ndx = 0

    for i = 1, #proxy.servers do
      local s = proxy.servers[i]

      -- 选择一个拥有空闲连接的从数据库
      if s.type == proxy.BACKEND_TYPE_RO and
         s.idling_connections > 0 then
        if max_conns == -1 or
           s.connected_clients < max_conns then
          max_conns = s.connected_clients
          max_conns_ndx = i
        end
      end
    end

    -- 我们找到了一个拥有空闲连接的从数据库
    if max_conns_ndx > 0 then
      proxy.connection.backend_ndx = max_conns_ndx
    end
  else
    -- 发送到主数据库
  end

  return proxy.PROXY_SEND_QUERY

Jan提醒说这个技巧还可以用来实现其他的数据分布策略，例如分片（Sharding）。

查看英文原文：Read/Write Splitting with MySQL-Proxy

1. 返回顶部

   我直接memcached不完了吗？

   2007年10月18日 上午3时14分 发表人 Hideto Huang

   不用读写分离了，我直接memcached，所有的读都到内存中去，数据库只负责写，速度肯定比你快。
   而且Master、Slave Replication方式带来的是Master的fail over、Slave的Replication lag等诸多问题

   回复

2. 返回顶部

   Re: 我直接memcached不完了吗？

   2007年10月18日 下午8时20分 发表人 Tiger F

   memcache通常都是些较小数据量的部分数据，而且要自己解决好与持久数据的一致性问题。
   这个proxy的方案已经解决了一致性问题，并且提供了全部数据的查询性能提升。还有一点，在read方面显然提供了较好的横向扩展能力。

   回复

3. 返回顶部

   Re: 我直接memcached不完了吗？

   2007年12月6日 上午11时11分 发表人 赵 稀露

   请问你实现了msyql proxy 吗!
   w我编译安装好了但是不能读写分离..你网站上的代码没有用..
   不知道是不是我设置错误..请指教....

   回复

4. 返回顶部

   支持基于python的django吗？

   2008年2月21日 下午8时12分 发表人 c l

   如题

   回复

5. 返回顶部

   Re: 我直接memcached不完了吗？

   2010年1月6日 下午8时24分 发表人 Karl MA

   对你的提问感到很无语

   回复

• 更早的 >