电信运营商互联网+业务中的分布式存储技术研究-中国联通.PDF

Research Development 研究与开发 电信运营商“互联网+”业务中的分布式 存储技术研究 石春达 栾文魁 张 伟 赵晓光 联通系统集成有限公司 北京 100032 ， “ ” 。 、 摘　要 随着互联网技术的成熟 各种类型的 互联网+ 业务应用得到快速发展 种类多 数量大是互联网数据 。 、 、 、 ， 的显著特点 传统存储由于其在元数据管理 访问性能 存储容量 横向扩展等方面的局限性 在进行海量小文件 处理时已显吃力。为满足井喷式互联网数据存储的需求，形式各样的分布式存储系统应运而生。文章对分布式存储 ， ， 技术进行研究分析 对比各类分布式存储系统的优劣 结合一些典型的电信业务简要论述哪些应用适合传统存储方 ， 。 “ ” 。 式 哪些应用适合分布式存储方式 希望能对电信运营商 互联网+ 业务系统建设起到抛砖引玉的作用 ； ； ； 关键词 互联网 小文件 分布式存储 横向扩展 性能方面能够达到或超越中高端存储的性能 在成本上 1 分布式存储技术概述 ， 远低于中高端存储。这也是分布式存储最吸引人之处。 1.1 分布式存储概念 但成本低廉的PC服务器在硬件可靠性方面与大型机相 比相去甚远，于是分布式系统由软件来对硬件进行容 运用分布式计算技术把大量标准X86服务器的本地 错，通过软件来保证整体系统的高可靠性。 存储介质进行聚合，将这些存储资源通过网络整合为一 3)高可靠性。通过把数据分成2-3个副本负载分散 个既具备传统SAN/NAS 的企业级功能和特性又具有良 到众多的机器上，单个节点故障最多只会使一个副本丢 好扩展性 低成本 高可靠 易用的存储系统 形成全 、 、 、 ， 失，而其它副本不会受任何影响。理想条件下 ，某一 新的产品类型 目前 市场上绝大部分分布式存储产 。 ， 时刻如果有1/3的节点出现故障 存储仍能继续工作 品都是由上述形态构成 我们将这一类产品称为Server ， ， ， 只不过损失1/3的性能。另外，线性扩展能力也使得增 SAN 。 加 减少机器非常方便 可以实现自动运维 、 ， 。 1.2 分布式存储的特点