专业支持:(0512) 63016160 / 销售热线:(0512)63016068
当前在线: 288 今日上线: 1384 今日新增: 3

[硕士论文]基于云计算的分布式存储系统的研究和应用

文章来源:  中国云计算 发布时间: 2012年08月28日   浏览: 1164   作者:中国云计算
fiogf49gjkf0d
基于云计算的分布式存储系统的研究和应用

西北工业大学 刘飞 

本文研究的主要内容是基于云计算的分布式存储技术,即云存储技术。旨在通过构建基于HDFS的云存储服务系统来解决海量数据的存储难题,降低实施分布式存储系统的成本,促进Hadoop技术的发展和推广。Hadoop是一个分布式基础架构下相关子项目的集合,包括Hive、HBase、Pig、Chukwa等。它们为Hadoop提供配套和补充性服务, Hadoop最核心的框架设计是HDFS和MapReduce。Hadoop分布式文件系统HDFS (Hadoop Distributed File System)被设计成适合运行在普通硬件上的文件系统,它为Hadoop分布式计算存储提供底层支持。 本文主要实现了一个面向应用的云存储服务系统,同时实现了一种解决当前Hadoop集群NameNode节点存在的单点故障问题的方案,当NameNode宕机时集群可以自动切换主节点,保证集群无重启正常运行。该系统解决了大规模非结构化数据的在线存储、查询和备份等问题。

关键词:Hadoop HDFS 云存储 Hadoop优化 NameNode单点故障

一键分享:

在线客服