-
题名计算存储分离云原生关系型数据库技术进展
被引量：1
- 1
-
-
作者
叶志伟
蔡敦波
钱岭
-
机构
中移(苏州)软件技术有限公司创新中心
-
出处
《软件导刊》
2021年第8期236-240,共5页
-
基金
中国移动通信集团有限公司应用基础研究项目(R202111101114MP)。
-
文摘
IT系统对大规模数据存储的需求日益增加,凸显云上数据库服务能力的重要性。传统数据库管理系统(如MySQL)虽能基于虚拟化技术在云上提供数据库服务,但不能有效运用云上资源,扩展性与可用性均存在局限。针对此问题,具备计算存储分离架构的云原生关系型数据库技术成为主流解决方案,同时为数据库即服务(DBaaS)用户带来成本及性能收益。计算存储分离云原生关系型数据库架构一般分为计算层和存储层,提供相应的计算与存储能力,但业界实现该架构的具体方法存在较大差异。分析国内外云服务商具有影响力的计算与存储分离技术,包括亚马逊AWS Aurora、微软AzureHyperscale、阿里云PolarDB及华为云TaurusDB的计算存储分离架构,总结计算存储分离技术进展,希望有助于云数据库开发者的架构设计与实践研究。
-
关键词
云原生
关系型数据库
计算存储分离
数据库即服务
-
Keywords
cloud-native
relational database
decoupled compute-storage architecture
database-as-a-service
-
分类号
TP392
[自动化与计算机技术—计算机应用技术]
-
-
题名Hadoop计算存储分离架构技术应用研究
- 2
-
-
作者
刘斌
-
机构
福州理工学院
国脉科技股份有限公司
-
出处
《信息通信》
2020年第5期220-222,共3页
-
文摘
伴随经济的发展,信息数据量急剧增加,对传统计算与存储融合架构发起了强有力的挑战。文章阐述了传统计算与存储融合架构面临的弊端,并介绍了计算与存储分离架构技术的概念、主要技术优势特点。同时通过工程实际案例对两种技术进行了对比分析。
-
关键词
计算存储分离
EC校验
Hadoop存储技术
-
分类号
TP303
[自动化与计算机技术—计算机系统结构]
-
-
题名基于存储和计算分离的NHD系统
- 3
-
-
作者
刘海洋
孟晓烜
许鲁
库依楠
-
机构
中国科学院计算技术研究所
-
出处
《计算机应用研究》
CSCD
北大核心
2007年第4期91-93,共3页
-
基金
国家自然科学基金资助项目(60373045)
-
文摘
介绍的NHD(Network Hard Disk)系统,在计算资源和存储资源物理分离的基础上,根据不同应用的需求,通过在客户端提供的一种特殊硬件设备将两者动态重组以构建新的计算机系统。这样形成的计算环境具有动态性、个性化和便于管理等特点。
-
关键词
网络硬盘
存储和计算分离
动态计算环境
-
Keywords
NHD（ network hard disk）
separation between storage and computation
dynamic computing environment
-
分类号
TP303
[自动化与计算机技术—计算机系统结构]
-
-
题名大数据计算与存储分离技术实验分析
被引量：1
- 4
-
-
作者
吴金坛
章超
李树楠
-
机构
中国银联电子支付研究院
复旦大学计算机科学技术学院
-
出处
《电脑知识与技术》
2020年第27期24-27,36,共5页
-
文摘
随着大数据的发展,传统的集群混合部署模式逐渐暴露出管理难、资源竞争、性能相互制约等问题。计算与存储分离部署方案不断发展,开始呈现其优势,但是在解决计算与存储资源弹性扩展、高容错和高可靠问题上,且具备兼顾虚拟机和容器两种部署方式的能力要求上,目前的方案都相形见绌。基于此,提出并实现了一种基于Ceph的大数据平台分离存储方案,解耦了计算与存储之间的绑定关系,同时实现了资源的弹性利用,并兼容了虚拟机和容器的两种大数据部署方式。最后我们搭建了试验环境对方案的功能及性能进行了测试,对上述能力进行了验证。
-
关键词
大数据
计算与存储分离
Ceph
-
Keywords
big data
Separation of computing and storage
ceph
-
分类号
TP31
[自动化与计算机技术—计算机软件与理论]
-
-
题名一种动态连接存储资源和计算资源装置的设计与实现
- 5
-
-
作者
刘宇
施家元
刘海洋
-
机构
中国科学院计算技术研究所
北京印刷学院教学技术与网络中心
-
出处
《计算机科学》
CSCD
北大核心
2007年第7期131-133,共3页
-
基金
国家"973"基金项目(2004CB318205)资助
-
文摘
存储与计算的分离,重新定义了计算机的使用模式。计算资源和存储资源的动态重构,不仅提高了资源的利用率,而且简化了管理。一种实现这种新模式同时又兼容于传统机制的方案是在存储设备级截获数据流,并转接到网络,利用现在网络高带宽、可靠和灵活的特性提供高速、稳定和动态的服务。本文将介绍动态网络硬盘nHD(network HardDisk)的设计和实现,给出并分析其运行性能。
-
关键词
NHD
存储和计算分离
动态计算环境
-
Keywords
nHD, Separation of storage and computation,Dynamic computing environment
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名云原生数据库综述
被引量：3
- 6
-
-
作者
董昊文
张超
李国良
冯建华
-
机构
清华大学计算机科学与技术系
-
出处
《软件学报》
EI
CSCD
北大核心
2024年第2期899-926,共28页
-
基金
国家自然科学基金(62232009,61925205,62072261)。
-
文摘
云基础设施的虚拟化、高可用、可弹性调度等特点,为云数据库提供了开箱即用、可靠可用、按需计费等优势.云数据库按照架构可以划分为云托管数据库(cloud-hosted database)以及云原生数据库(cloud-native database).云托管数据库将数据库系统直接部署到云上虚拟机环境中,具备低成本、易运维、高可靠的优势.在此基础上,云原生数据库充分利用云基础设施弹性伸缩的特点,采用计算存储分离的架构,实现了计算资源和存储资源的独立伸缩,进一步提升数据库性价比.然而计算存储分离的架构为数据库系统设计带来了新的挑战.深入分析云原生数据库系统的架构和技术.首先将云原生OLTP和云原生OLAP的数据库架构按照资源分离模式的差异分别进行归类分析,并对比各类架构的优势与局限.其次,基于计算存储分离的架构,按照各个功能模块深入探讨云原生数据库的关键技术:主要包括云原生OLTP关键技术(数据组织、副本一致性、主备同步、故障恢复以及混合负载处理)和云原生OLAP关键技术(存储管理、查询处理、无服务器感知计算、数据保护以及机器学习优化).最后,总结现有云原生数据库的技术挑战并展望未来研究方向.
-
关键词
云原生数据库
计算存储分离
数据库即服务
-
Keywords
cloud-native database
compute-storage disaggregation
database-as-a-service(DBaaS)
-
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
-
-
题名电信运营商数据湖技术实施策略
被引量：19
- 7
-
-
作者
胡军军
谢晓军
石彦彬
喻琦
-
机构
中国电信股份有限公司广州研究院
-
出处
《电信科学》
2019年第2期84-94,共11页
-
文摘
首先,从分析电信运营商传统数据架构入手,识别当前面临的数据质量不高、实时性不够、灵活性不足及存储和应用相互制约等问题。然后,讨论引入数据湖技术的可行性,明确数据湖的存储规模化和低成本、数据"原汁原味"和方便易用、应用按需建模等特点,能够为电信运营商数据架构优化提供非常有益的参考。最后,提出数据统一存储、统一标准、近源采集、与应用分离的电信运营商数据湖建设方案,并针对数据湖数据分区、部署、入湖及应用数据动态加载、数据统一管理等关键要点给予明确的阐述。
-
关键词
数据湖
原生数据存储
存储计算分离
数据目录
-
Keywords
data lake
native data storage
loose coupling between storage and computation
data catalog
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
-
