分布式数据库DDB introduce

2023-10-29 12:31

本文主要是介绍分布式数据库DDB introduce,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

DDB(Distributed database)是网易杭研院立项最早,应用最为广泛的后台产品之一,也是国内最早出现的基于现有database之上开发的分布式数据库中间件,目前依然在为网易易信,云音乐,云阅读等大型互联网产品提供稳定的数据库服务。业界中同类型的产品有阿里集团的TDDL,阿里B2B的cobar等。

DDB主要以两种方式向应用方提供服务:

一种是以JDBC的jar包形式为JAVA应用提供直接依赖,JAVA应用(如tomcat)通过依赖DDB提供的JDBC包实现透明访问分布式数据库集群中的各个分库分表,这种服务方式与淘宝TDDL如出一辙,我们称之为中间件模式。

另一种方式是为应用部署独立的DDBProxy服务来满足应用分库分表的需求,在这种方式下,应用通过标准JDBC访问Proxy,而Proxy则根据MySQL标准通信协议对客户端请求解析,还原应用SQL请求,然后通过本地的DDB JDBC访问数据库集群,最后再将得到的结果根据MySQL标准通信协议编码返回给客户端。这种服务方式与B2B的cobar以及现在阿里云的DRDS类似,不同的是DDB的Proxy与DDB在语法特性上一脉相承,而根据目前已有的资料来看,与TDDL相比DRDS在语法特性和事务支持上是有所阉割的。

DDB的中间件模式概念架构:

dbi architecture

dbi architecture

DDB Proxy概念架构:

proxy architecture

proxy architecture

DDB支持的语法功能:

  1. General Insert(support batch, on duplicate key..), update, delete, replace, select(with alias)
  2. Global group by, order by, limit, having
  3. Global aggregate: max, min, count, avg, concat
  4. Global incremental id
  5. Multiple table join(limited), union
  6. Subquery(need trade off sometimes)

一些语法细节上DDB无法支持,如全局跨表表达式:select A.num + B.num from a, b where …,其中A和B都是跨库的表,这种类似功能我个人认为在中间件层面是难以实现的,或者说即使实现了对实际应用场景也是不可用的。

总体来说,DDB的语法集属于“大而全”的类型,对一些情况如limit一个很大的数据所带来的性能折损,需要DBA帮助应用去优化SQL写法,或者直接在SQL审核中砍掉。对分布式数据库来说,DBA的把关至关重要,尤其在表模式设计和均衡字段选择上,一旦一张表的均衡字段选择和表设计上存在疏漏,会给应用未来的开发造成极大的困扰。

无论是阿里系的各种分布式数据库(TDDL, DRDS, OceanBase)还是DDB,又或是其他公司自研项目如youtube Vitess和google spanner,它们的运维和学习成本要比传统数据库高很多,不同系统在功能,性能以及高可用架构上的取舍体现了不同开发团队的品味。

最后贴一个facebook来交流时给老大写的一个PPT,简单介绍了下DDB中各种概念和整体架构,分享给有兴趣的同学。

DDB-introduce ppt

BTW,DDB目前是网易非开源项目(根据上层的意思,以后可能会开源,或向其他公司提供服务,日期未定),但是欢迎有兴趣的同学多多交流 ~_~


http://www.majin163.com/2014/09/24/ddb-introduce/

这篇关于分布式数据库DDB introduce的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/300658

相关文章

MySQL数据库中ENUM的用法是什么详解

《MySQL数据库中ENUM的用法是什么详解》ENUM是一个字符串对象,用于指定一组预定义的值,并可在创建表时使用,下面:本文主要介绍MySQL数据库中ENUM的用法是什么的相关资料,文中通过代码... 目录mysql 中 ENUM 的用法一、ENUM 的定义与语法二、ENUM 的特点三、ENUM 的用法1

Java中调用数据库存储过程的示例代码

《Java中调用数据库存储过程的示例代码》本文介绍Java通过JDBC调用数据库存储过程的方法,涵盖参数类型、执行步骤及数据库差异,需注意异常处理与资源管理,以优化性能并实现复杂业务逻辑,感兴趣的朋友... 目录一、存储过程概述二、Java调用存储过程的基本javascript步骤三、Java调用存储过程示

Go语言数据库编程GORM 的基本使用详解

《Go语言数据库编程GORM的基本使用详解》GORM是Go语言流行的ORM框架,封装database/sql,支持自动迁移、关联、事务等,提供CRUD、条件查询、钩子函数、日志等功能,简化数据库操作... 目录一、安装与初始化1. 安装 GORM 及数据库驱动2. 建立数据库连接二、定义模型结构体三、自动迁

嵌入式数据库SQLite 3配置使用讲解

《嵌入式数据库SQLite3配置使用讲解》本文强调嵌入式项目中SQLite3数据库的重要性,因其零配置、轻量级、跨平台及事务处理特性,可保障数据溯源与责任明确,详细讲解安装配置、基础语法及SQLit... 目录0、惨痛教训1、SQLite3环境配置(1)、下载安装SQLite库(2)、解压下载的文件(3)、

MySQL数据库的内嵌函数和联合查询实例代码

《MySQL数据库的内嵌函数和联合查询实例代码》联合查询是一种将多个查询结果组合在一起的方法,通常使用UNION、UNIONALL、INTERSECT和EXCEPT关键字,下面:本文主要介绍MyS... 目录一.数据库的内嵌函数1.1聚合函数COUNT([DISTINCT] expr)SUM([DISTIN

MySQL追踪数据库表更新操作来源的全面指南

《MySQL追踪数据库表更新操作来源的全面指南》本文将以一个具体问题为例,如何监测哪个IP来源对数据库表statistics_test进行了UPDATE操作,文内探讨了多种方法,并提供了详细的代码... 目录引言1. 为什么需要监控数据库更新操作2. 方法1:启用数据库审计日志(1)mysql/mariad

postgresql数据库基本操作及命令详解

《postgresql数据库基本操作及命令详解》本文介绍了PostgreSQL数据库的基础操作,包括连接、创建、查看数据库,表的增删改查、索引管理、备份恢复及退出命令,适用于数据库管理和开发实践,感兴... 目录1. 连接 PostgreSQL 数据库2. 创建数据库3. 查看当前数据库4. 查看所有数据库

从入门到精通MySQL 数据库索引(实战案例)

《从入门到精通MySQL数据库索引(实战案例)》索引是数据库的目录,提升查询速度,主要类型包括BTree、Hash、全文、空间索引,需根据场景选择,建议用于高频查询、关联字段、排序等,避免重复率高或... 目录一、索引是什么?能干嘛?核心作用:二、索引的 4 种主要类型(附通俗例子)1. BTree 索引(

Oracle 数据库数据操作如何精通 INSERT, UPDATE, DELETE

《Oracle数据库数据操作如何精通INSERT,UPDATE,DELETE》在Oracle数据库中,对表内数据进行增加、修改和删除操作是通过数据操作语言来完成的,下面给大家介绍Oracle数... 目录思维导图一、插入数据 (INSERT)1.1 插入单行数据,指定所有列的值语法:1.2 插入单行数据,指

k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)

《k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)》本文记录在K8s上运行的MySQL/MariaDB备份方案,通过工具容器执行mysqldump,结合定时任务实... 目录前言一、获取需要备份的数据库的信息二、备份步骤1.准备工作(X86)1.准备工作(arm)2.手