统一数据库的愿景

2024-03-16 23:58
文章标签 统一 数据库 愿景

本文主要是介绍统一数据库的愿景,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、背景

现在的计算机技术的发展,基本上一年一变,特别是互联网。最近的分布式架构尤其突出,从反向代理、负载均衡到SOA、RPC这些东东,基本上都是解决了网络上的瓶颈,其实这网络上的问题大不了就是增加服务器,多个工具或一个环节来缓冲访问的时间和速度。还有最近的SPRINGCLOUD之类的,像这些也就是解决了程序上访问流通过程,但是,最终还是要在数据层出现瓶颈,数据层的控制就显而易见了,不过眼前的数据层就出现了:对数据库进行分库分表,其解决方法呢,又是纵向又是横向的,分库分表也会暴露很多问题:像多表关联查询、综合数据、统计数据这些诸如此类的问题,然后呢这些人又说如何如何解决的。

以后,网络速度肯定会逐步加快的,这访问数据库的瓶颈远远大于程序里访问的瓶颈,即使数据库采取分库分表,其局限性也显而易见,并且采取的措施估计越来越复杂。

基于以上需求,我大胆的猜想,要是开发出一套数据库,能解决这些问题多好。在2006到2009年做手游的时候,就把大部分数据放到缓存里,没想到在2011年后,就有了REDIS、MONGDB、HBASE这些基于缓存的KV数据库,虽然这些解决了一些问题,但是在某些功能上还是没有达到我所预期目的。

二、猜想需求

       目前的数据存在的流程和处理如下:

照目前的形势,以后的数据库需要分开为:内存数据库、缓存数据库、硬盘数据库;缓存数据库就是现在流行的REDIS、MONGDB、HBASE这些;硬盘数据库呢就是:MYSQL、ORACLE、MSSQLSERVRR、INFORMIX、DB2这些;但是内存数据库目前是没有发现更好的,即使有,也是功能不是很完善,需要我们开发的一套系统软件。

       内存数据库和硬盘数据库的关系如下:硬盘数据库主要是做永久性存储,一旦内存数据库重启或者停止使用时,把所有数据存入硬盘数据库,如果内存数据库启用后,把硬盘数据库的数据全部读入内存数据库,内存数据库可以使用一定的写入策略保存数据到硬盘数据库。

综合以上,开发出一套统一数据库系统,此系统需要包括内存数据库和硬盘数据库。需要解决读取以前关系型数据库的数据,保存到本系统的数据库中。以下图示是开发出以后的流程形式:

统一数据库大致的处理过程,如下:

 

 

三、实现目标

实现统一数据库系统的目的,必须达到以下几点:

  1. 需要是跨平台的;使用什么语言开发这套系统,不限制,但是最需要的是跨平台;
  2. 能读写目前业界任何硬盘数据库的数据,也就是对他们的数据类型和相关的程序(存储过程)都能处理;
  3. 拥有现在数据库的大部分特性,如:事物(ACID)处理的特性,能QUID,能定义存储过程和函数、触发器等;
  4. 能集群和分布式部署,采取读写相关策略,以求达到快速处理访问请求;
  5. 既然是数据库,肯定可以使用SQL查询,但是,可以不用分库分表那么麻烦
  6. 安全、稳定等性能必须考虑;
  7. 需要定义众多的对外访问接口,这是跨语言的:PHP、java、.net等

现在不用考虑说硬盘数据库的体量比较大,内存肯定不会比它的小,以后的内存,一旦集群,按T计算的内存还是很多的;

这种考虑,不仅仅是为了解决以后访问数据库的响应速度问题,还要解决数据库一统问题。

 

四、问题

1、谁来做这系统?

 

2、有人说利用:REDIS+mongodb+MYSQL+ES就能解决这个数据库系统,这是不是要整多个软件,而且配置、安装、数据处理这些过程是不是要重新写代码和文件呢?

3、SAP HANA这个商用的数据处理系统。这是个(High-Performance Analytic Appliance)高性能分析设备,它是软硬件结合的一个产物:

定义1:HANA是一个软硬件结合体,提供高性能的数据查询功能,用户可以直接对大量实时业务数据进行查询和分析。用户拿到的是一个装有预配置软件的设备。至于HANA的云服务,只是对用户而言可以在不购买相关硬件的情况下享受HANA的高性能,而HANA云服务的背后还是需要更高性能的硬件支撑的。

定义2: 基于内存计算技术的高性能实时数据计算平台,是全球一个发布商用的基于内存计算的产品,通过 SAP 内存计算技术优化应用,转变人们的思考、规划和工作方式。

4、是否可以以mysql-cluster-gpl-7.6.10或PostgreSQL为基础上进行改版开发;或者是目前有如此一个软件系统?

这篇关于统一数据库的愿景的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/817169

相关文章

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

SQL Server数据库死锁处理超详细攻略

《SQLServer数据库死锁处理超详细攻略》SQLServer作为主流数据库管理系统,在高并发场景下可能面临死锁问题,影响系统性能和稳定性,这篇文章主要给大家介绍了关于SQLServer数据库死... 目录一、引言二、查询 Sqlserver 中造成死锁的 SPID三、用内置函数查询执行信息1. sp_w

统一返回JsonResult踩坑的记录

《统一返回JsonResult踩坑的记录》:本文主要介绍统一返回JsonResult踩坑的记录,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录统一返回jsonResult踩坑定义了一个统一返回类在使用时,JsonResult没有get/set方法时响应总结统一返回

Druid连接池实现自定义数据库密码加解密功能

《Druid连接池实现自定义数据库密码加解密功能》在现代应用开发中,数据安全是至关重要的,本文将介绍如何在​​Druid​​连接池中实现自定义的数据库密码加解密功能,有需要的小伙伴可以参考一下... 目录1. 环境准备2. 密码加密算法的选择3. 自定义 ​​DruidDataSource​​ 的密码解密3

Maven项目中集成数据库文档生成工具的操作步骤

《Maven项目中集成数据库文档生成工具的操作步骤》在Maven项目中,可以通过集成数据库文档生成工具来自动生成数据库文档,本文为大家整理了使用screw-maven-plugin(推荐)的完... 目录1. 添加插件配置到 pom.XML2. 配置数据库信息3. 执行生成命令4. 高级配置选项5. 注意事

在Java中基于Geotools对PostGIS数据库的空间查询实践教程

《在Java中基于Geotools对PostGIS数据库的空间查询实践教程》本文将深入探讨这一实践,从连接配置到复杂空间查询操作,包括点查询、区域范围查询以及空间关系判断等,全方位展示如何在Java环... 目录前言一、相关技术背景介绍1、评价对象AOI2、数据处理流程二、对AOI空间范围查询实践1、空间查

Python+PyQt5实现MySQL数据库备份神器

《Python+PyQt5实现MySQL数据库备份神器》在数据库管理工作中,定期备份是确保数据安全的重要措施,本文将介绍如何使用Python+PyQt5开发一个高颜值,多功能的MySQL数据库备份工具... 目录概述功能特性核心功能矩阵特色功能界面展示主界面设计动态效果演示使用教程环境准备操作流程代码深度解

MySQL数据库实现批量表分区完整示例

《MySQL数据库实现批量表分区完整示例》通俗地讲表分区是将一大表,根据条件分割成若干个小表,:本文主要介绍MySQL数据库实现批量表分区的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考... 目录一、表分区条件二、常规表和分区表的区别三、表分区的创建四、将既有表转换分区表脚本五、批量转换表为分区

MySQL Workbench工具导出导入数据库方式

《MySQLWorkbench工具导出导入数据库方式》:本文主要介绍MySQLWorkbench工具导出导入数据库方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝... 目录mysql Workbench工具导出导入数据库第一步 www.chinasem.cn数据库导出第二步

Mysql数据库中数据的操作CRUD详解

《Mysql数据库中数据的操作CRUD详解》:本文主要介绍Mysql数据库中数据的操作(CRUD),详细描述对Mysql数据库中数据的操作(CRUD),包括插入、修改、删除数据,还有查询数据,包括... 目录一、插入数据(insert)1.插入数据的语法2.注意事项二、修改数据(update)1.语法2.有