广电网络IT基础设施将面向融合媒体服务提供池化资源的按需分配能力,存储系统是拟提供的核心IT能力之一。为了打造云环境中面对异构数据模型的可靠统一存储系统,本文分析了'去中心化'的软件定义分布式存储体系,研究其中关键技术问题,并设计了一个基于Ceph架构的存储架构。
作者:谢超群 期刊:《洛阳师范学院学报》 2019年第02期
随着高校信息化的发展,高校数据中心越来越多地采用微服务架构,但传统Docker容器的存储技术存在着数据可靠性低、数据不能持久化、动态扩展性差等问题.面对上述问题,本文提出一种基于Ceph存储集群平台和Kubernetes后端存储技术的高校容器云存储的解决方案,该方案利用Ceph构建底层云存储集群,解决了存储数据的可靠性差的问题,并利用Kubernetes的Persistent Volume和Dynamic provisioning存储技术实现了容器存储的持久化和动态置备,...
作者:江俊彦; 宗丹; 林锐 期刊:《内燃机与配件》 2018年第01期
自20世纪以来,随着不同类型的大规模数据分析的驱动,比如用户行为分析、搜索引擎和推荐系统,大规模数据的存储和处理的需求急剧增长。本文分别对比了5种典型的分布式文件系统,介绍了其基本架构、数据分布和查询处理流程,然后对这些系统的优缺点进行了分析,最后给出了在不同场景下如何对分布式文件系统进行选择的建议,并对未来分布式文件系统的发展进行了展望。
存储系统的可靠性和安全性至关重要,保证存储系统可靠性的方式则是对数据进行冗余存储。广泛应用的数据冗余存储技术主要有两种:副本冗余和纠删码冗余。Ceph作为一种分布式云存储解决方案越来越流行,文章以Ceph为平台,研究与分析了Ceph的副本冗余和纠删码冗余机制,分析对比了这两种方式各自的优缺点,并以此为基础提出一种综合二者优点的冗余方法。该方法在节省存储空间和数据访问性能方面达成一个折中,同时也保证了系统的可靠性。
随着信息技术的持续发展,用户需求的多样化和电力业务的复杂化使得数据中心的规模不断扩大。数据中心对资源集约管理和对管理成本有效控制的需求促使企业必须探索新型的云计算解决方案。OpenStack开源虚拟化技术和Ceph开源分布式存储技术为构建新型私有云平台提供了一种有效解决方法。本文将论述如何使用OpenStack和Ceph构建企业的开源私有云平台。
作者:杨皓森; 胡晓勤; 黄传波 期刊:《计算机系统应用》 2018年第11期
针对OpenStack面临的虚拟机容灾备份问题,提出了一种基于Ceph存储快照的虚拟机容灾备份系统,备份时对虚拟机存储在Ceph中的磁盘生成快照,再根据备份要求计算有效数据或者变化数据,保存虚拟机的配置信息以及磁盘数据,恢复时自动创建相同配置的虚拟机并将当前快照点的磁盘数据恢复到该虚拟机中.实验表明,该方法比OpenStack的快照备份方法能有效节省备份时间和存储空间,并且可以实现后者不具有的增量备份、多磁盘备份等功能.
作者:胡勋; 杨靖琦 期刊:《信息系统工程》 2018年第06期
本文分析了云网盘系统的需求,设计了云网盘的系统架构和主要功能。基于B/S架构,利用Opentack和分布式文件系统Ceph搭建的云环境,实现了云网盘的主要功能,通过Web可为用户提供可靠文件存储服务。
作者:张江凯; 陈闻 期刊:《湖北电力》 2017年第08期
介绍了OpenStack开源云计算、KVM虚拟化、Ceph分布式存储以及网络虚拟化等技术,结合这些技术探讨了面向电力行业的OpenStack私有云建设方式,给需要建设私有云的企业提供了相关的参考建议。
作者:彭潇; 张俊; 印钊 期刊:《计算机与现代化》 2017年第09期
当OpenStack使用Ceph作为存储后端时,由于Ceph内部本身克隆机制,导致OpenStack云平台存储管理容易出错且效率低。为了解决和优化OpenStack使用Ceph作为存储后端时在存储管理技术方面的不足,本文在开源云平台OpenStack的基础上,通过后端存储Ceph查询各对象在后端的表现形式,递归查找卷或快照的子链路,实现OpenStack存储克隆链功能,并通过Django和Angular JS实现克隆链可视化。通过克隆链展示,可以清晰地了解OpenStack各存储...
存储技术在云计算时代得到了革新性发展,本文对现阶段云平台中主使用的分布式存储及NoSQL数据库进行研究和分析,为行业内存储系统技术选型提供参考和依据。
作者:何汉东; 张倩 期刊:《计算机系统应用》 2017年第07期
在分布式存储集群环境中,为了兼容现有存储协议,提高集群可扩展性,通常都会支持ISCSI存储协议.而现有ISCSI服务的高可用主要通过主从备份的方式实现,该方式会导致资源利用不充分,容易造成单节点负载过重等情况.本文基于Ceph分布式存储系统的优势,采用raft一致性算法等设计并实现ISCSI高可用集群.ISCSI集群使用自定义的节点选择策略实现服务负载均衡,并通过raft分布式协议实现服务故障迁移.实验表明,本文提出的方案是有效的,能够实...
作者:陈凌剑; 王勇; 俸皓 期刊:《微电子学与计算机》 2017年第06期
通过分析集群中单节点在不同网络延时下的延时大小与集群存储性能的关系,提出基于网络时延的权重改进方法.实验表明所提出的方法可根据存储节点的网络时延对权重进行再调整,使数据较大概率存入网络时延小的节点.该方法降低了由单一节点网络延时引起的存储性能损耗,从而提高了CEPH分布式存储系统的存储性能.
作者:刘莎 楚传仁 期刊:《信息网络安全》 2016年第04期
文章针对Ceph文件系统的可靠性和安全性进行了重点研究。系统的可靠性和安全性一般通过数据容错技术实现。广泛应用的数据容错技术有完全副本和纠删码。完全副本将数据复制成多份进行分散存储,这种方式会降低存储效率并浪费存储空间;而纠删码虽然可以有效利用存储空间,但由于需要对数据进行编码存储,访问数据时需要对其进行解码操作,使得数据的访问效率较低。文章结合这两种容错机制,在Ceph文件系统的基础上,提出了基于文件等级进...
作者:杨飞 朱志祥 梁小江 期刊:《计算机系统应用》 2016年第04期
海量并行数据访问ceph对象存储集群时,会出现访问数据错误率增加和访问速率降低的问题.首先设计和部署ceph对象存储集群,根据用户请求数设计对象网关节点,实现用户数据的交互功能,然后在服务节点安装和部署haproxy,实现服务节点的负载均衡功能,能够降低服务节点的压力,最后设计和实现四种基于ceph对象网关节点的存储集群.通过大量对比测试,本设计方案的数据访问错误率降低0.96%,用户数据的访问速率提升74.04%.
作者:杨飞 朱志祥 梁小江 期刊:《电子科技》 2015年第10期
针对基于传统NAS存储实现云网盘存在扩展性差,响应性能低、数据不可靠性、安全性低等问题,提出一种基于Ceph分布式对象存储系统构建高性能、高可靠、可扩展的云网盘设计与实现方案,底层基于X86服务器作为Ceph存储集群池,通过设计多对象网关对象存储服务,采用软负载均衡,提升云网盘请求响应吞吐能力,并集成基于Token认证系统实现对象数据的隔离与安全。经实验测试表明,该设计实现方案可满足现实应用需求。
在目前开源世界的存储项目中,不同的项目都有侧重点,然而,存储接口需求、扩展、运维和成本是企业级存储产品的四大关注点。Ceph是一种支持对象存储、块存储、文件存储的独特统一的系统,具有高可用、易管理、免费等特点。本文介绍了当下流行的Ceph分布式存储架构,描述了Ceph的基本结构每个组件的作用及如何创建和优化Ceph集群,并就Ceph作为OpenStack的后端存储、高效集成,及CRUSH算法进行了分析。