专业的信息化与通信融合产品选型平台及垂直门户
注册 登陆 设为首页 加入收藏
首页 企业新闻 招标信息 行业应用 厂商专区 活动 商城 中标信息

资讯
中心

新闻中心 人物观点
厂商专区 市场分析
行业
应用
政府机构 能源产业 金融机构
教育科研 医疗卫生 交通运输
应用
分类
统一协作 呼叫客服 IP语音 视频会议 智能管理 数据库
数字监控 信息安全 IP储存 移动应用 云计算 物联网

TOP

IBM将在Hadoop上建立全新存储架构设计
2011-05-13 10:33:07 来源:it168网站原创 作者: moxingwang【
关键词:IBM Hadoop 存储
 
IBM科学家宣称,该设计在将万亿字节的数据变成可用的信息方面,速度比当前技术可以提高两倍。因此,该设计非常适用于云计算和数据密集型的工作负载应用场合,比如数字媒体、数据挖掘、金融分析等。

   IBM科学家宣称,该设计在将万亿字节的数据变成可用的信息方面,速度比当前技术可以提高两倍。因此,该设计非常适用于云计算和数据密集型的工作负载应用场合,比如数字媒体、数据挖掘、金融分析等。

  这种新的架构名为通用并行文件系统无共享群集 (GPFS-SNC,General Parallel File System-Shared Nothing Cluster),旨在通过高级集群技术、动态文件系统管理和高级数据复制(Data Replication)技术来提高可用性和速度。

  存储分析发明者和IBM的研究主管Prasenjit Sarkar表示,一个拥有40个节点的文件系统将有12GB/sec吞吐量,并与400个节点的系统可以达到120GB/sec吞吐量。他说:“这是非常符合成本效益的带宽。你得到1MB/sec美元。如果你想复制,存储区域网络,它会非常昂贵。”

  “在我们的集群示例中,您可以在Hadoop架构上建立作为群集运行DB2或Oracle数据库”Sarkar说。 “这让我们能够有一个通用的文件系统,广泛的用户可使用。”

  据了解,新的架构是让应用程序,支持高性能分析,数据仓库应用程序和云计算的目的。他描述为每个节点或标准的x86服务器有机会获得自己的元数据,缓存,数据存储和管理工具的GPFS的“不共享”的集群技术,同时也有通过千兆位接入在同一时间集群中所有其他节点以太网端口。

  他说:“我们所做的,是我们每一个分布式文件系统方面相对于谷歌文件系统,它有一个域节点,元数据,分配,锁管理,令牌管理,即使来自集群服务器的机架,我们仍然可以继续工作。”

  所谓无共享,可用性,性能和扩展新的水平,可实现与集群文件系统。中的每个GPFS-SNC的架构节点也自给自足。任务被划分这些独立的计算机之间。

  GPFS也支持POSIX,使一个应用广泛的传统上运行的文件系统之上,允许读取和写入执行。Prasenjit Sarkar说:“你可以打开一个文件,你可以读取一个文件,那么你就可以追加到该文件并覆盖任何部分。与谷歌的Hadoop分布式文件系统,你可以不追加到一个文件,你不能覆盖的任何章节,所以你重非常有限你能做什么。”

  GPFS的-民委还支持企业数据存储功能,例如快照,备份整个范围内,归档,信息生命周期管理,数据缓存,广域网数据复制和管理政策。该体系结构有一个单一的全球域名称空间,使虚拟机管理程序的节点之间移动。

      

责任编辑:admin
免责声明:以上内容转载互联网平台或企业单位自行提供,对内容的真实性、准确性和合法性不负责,Voipchina网对此不承担任何法律责任。

】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部

上一篇渐成主流 USB3.0成为存储装备必备..
下一篇超低16GB大存储机 诺基亚X6优惠价..

热门文章

图片主题

最新文章

相关文章

广告位

Copyright@2003-2009 网络通信中国(原VoIP中国) 版权所有
联系方式:503927495@qq.com
  京ICP备05067673号-1 京公网安1101111101259