Go在酷狗数据库中间件的应用

 2022-10-27    299  

大数据

本次分享主要围绕Go在数据库中间件应用这方面展开;首先会聊一下程序开发的需求,具体会参考Go的特性是否满足这些需求;接下来会介绍一下近期采用Go语言开发的mysql中间件这个项目,整体方案,分表路由、故障切换、平滑扩容,系统运维,主要从以上这五个方面进行展开。

程序开发需求

程序开发对开发语言的要求,简单概括如下几点:

语言特性精炼,容易入门

开发效率高,代码逻辑清晰

运行性能强,节省机器资源

部署维护方便

生态圈完善

Golang的特性

结合Golang与C之间区别,阐述一下Golang的特性:

Go语法简练;没有学习压力

开发效率高;语言描述能力接近于脚本语言

性能高;接近于C/C++,充分利用资源

容易部署;可执行程序,编译时解决上线部署、运行时的依赖

强大的标准库、丰富的第三方库、go test、pprof

自动内存管理;内存泄漏与野指针是C/C++语言开发者的噩梦

Go routine + channel;简单的并发与简易的数据同步

Go开发mysql中间件

  • 系统整体方案

图 1

本系统开发的出发点是:突破mysql的单机、单表容量,解决mysql访问的单点问题。

上图是系统整体框架图,整套系统致力于提供一套 mysql 分布式解决方案,上层应用接入本系统与使用单机mysql一样;系统内部会做一些路由分发、故障切换、读写分离等工作。

proxy接收SQL请求,解析SQL语句、路由分发以及组装返回结果;

mysql-group都是一个“复制集”,可以是主从模式、主主模式;

dbmoniter主要是负责故障切换、数据修复等;

zookeeper上存储相关的配置信息。

  • 分表路由逻辑

分表规则遵循哈希分表与分段分表两种;哈希分表是shardkey通过Hash函数分表,分段分表是按照年、月、日或者整形范围进行分表。这两种方式的区别在于因哈希规则不同,导致其数据组织方式上的差异性。

  • 故障主备切换

  •  标签:  
  • MySQL
  •  

原文链接:http://www.77isp.com/post/10621.html

=========================================

http://www.77isp.com/ 为 “云服务器技术网” 唯一官方服务平台,请勿相信其他任何渠道。