研究论文

提高分布式文件系统中读取操作性能的高效算法

作者:

T.拉克希米湿婆罗摩克里希纳,

T。拉古纳坦、和

苏迪尔·库马尔 Battula公司作者信息和声明

HPC’15：高性能计算研讨会论文集

2015年4月

页143-149

出版:2015年4月12日出版历史

获取访问权限

摘要

分布式文件系统（DFS）在现代基于云的系统中用于存储和处理大量数据。DFS使用文件共享语义在系统的授权用户之间以一致的方式共享数据。流行会话语义的局限性在于，读取客户端进程无法读取并发写入客户端进程在同一会话中对同一共享文件所做的修改。BlobSeer DFS中遵循的线性化语义允许读取客户端进程读取二进制大对象（blob）的早期版本，同时对该blob执行写入操作。在本文中，我们分别提出了一种新的语义和度量类型，即“推测语义”和“货币”。推测语义允许读取客户端进程读取并发写入客户端进程在同一会话中所做的修改。货币是用于衡量读取算法性能的指标。本文提出了两种新的基于推测语义的读取算法。我们在Blobseer DFS上进行了实验，以测量这些读取算法的性能，所得结果表明，所提算法的性能优于现有的Blobseer DFS读取算法。

工具书类

[1]

Batini，C.、Cappiello，C.、Francalanci，C.和Maurino，A.数据质量评估和改进方法。ACM计算调查（CSUR）41, 3 (2009), 16.

数字图书馆

谷歌学者

[2]

Ghemawat，S.、Gobioff，H.和Leung，S.-T.谷歌文件系统。在ACM SIGOPS操作系统评审，第37卷，ACM（2003），29-43。

数字图书馆

谷歌学者

[3]

Herlihy，M.P.和Wing，J.M.线性化：并发对象的正确性条件。美国计算机学会程序设计语言与系统汇刊（TOPLAS）12, 3 (1990), 463--492.

数字图书馆

谷歌学者

[4]

Howard，J.H.、Kazar，M.L.、Menees，S.G.、Nichols，D.A.、Satyanarayanan，M.、Sidebotham，R.N.和West，M.J.分布式文件系统中的规模和性能。ACM计算机系统事务处理（TOCS）6, 1 (1988), 51--81.

数字图书馆

谷歌学者

[5]

Krishna Reddy，P.和Kitsuregawa，M.旨在提高分布式数据库系统性能的推测性锁定协议。知识与数据工程，IEEE汇刊16, 2 (2004), 154--169.

数字图书馆

谷歌学者

[6]

Levy，E.和Silberschatz，A.分布式文件系统：概念和示例。ACM计算。Surv公司。22，4（1990年12月），321--374。

数字图书馆

谷歌学者

[7]

Nicolae，B.、Moise，D.、Antoniu，G.、Bougé，L.和Dorier，M.Blobseer：为hadoop map-reduce应用程序带来高吞吐量。在并行与分布式处理（IPDPS），2010年IEEE国际研讨会，IEEE（2010），1-11。

交叉参考

谷歌学者

[8]

Ragunathan，T.和Krishna Reddy，P.基于推测的协议，用于改进只读事务的性能。国际计算科学与工程杂志5, 3 (2010), 226--242.

数字图书馆

谷歌学者

[9]

Sandberg，R.、Goldberg，D.、Kleiman，S.、Walsh，D.和Lyon，B.太阳网络文件系统的设计和实现。在USENIX夏季会议记录(1985), 119--130.

谷歌学者

[10]

Satyanarayanan，M.、Kistler，J.J.、Kumar，P.、Okasaki，M.E.、Siegel，E.H.和Steere，D.C.Coda：分布式工作站环境的高可用文件系统。计算机，IEEE汇刊39, 4 (1990), 447--459.

数字图书馆

谷歌学者

[11]

Shvachko，K.、Kuang，H.、Radia，S.和Chansler，R.hadoop分布式文件系统。在大容量存储系统和技术（MSST），2010年IEEE第26届研讨会，IEEE（2010），1-10。

数字图书馆

谷歌学者

[12]

Tanenbaum，A.S.和Steen，M.v。分布式系统：原理和范例（第二版）。Prentice-Hall，Inc.，美国新泽西州上鞍河，2006年。

数字图书馆

谷歌学者

[13]

Vogels，W.最终一致。队列6, 6 (2008), 14--19.

数字图书馆

谷歌学者

引用人

查看全部

(2019)分布式文件系统中基于推测语义的读操作算法性能评估国际通信网络与分布式系统杂志10.5555/3337439.333744122:3(275-293)在线发布日期：2019年1月1日
https://dl.acm.org/doi/10.5555/3337439.3337441网址

索引术语

提高分布式文件系统中读取操作性能的高效算法
1. 软件及其工程
  1. 软件组织和属性
    1. 上下文软件域
      1. 操作系统
        内存管理
        分布式内存
    2. 软件系统结构
      1. 分布式系统组织原则

建议

提高分布式文件系统中读取操作的性能
2014年国际计算智能与通信网络会议记录

分布式文件系统用于分布式系统中，以支持可扩展存储，并支持数据的并行和分布式处理。在授权用户之间共享存储在分布式文件系统中的数据是。。。
阅读更多信息
一种用于提高快速文件系统中小文件写入性能的多文件写入方案

快速文件系统（FFS）以单独的磁盘写入方式将文件存储到磁盘，每次写入都会导致磁盘定位（查找+旋转），从而限制小文件的写入性能。我们提出了一种新的方案，称为联合写入，以加速小文件写入。。。
阅读更多信息
改进Hadoop map/reduce框架，通过BlobSeer BLOB管理系统支持并发追加
HPDC’10：第19届ACM高性能分布式计算国际研讨会论文集

Hadoop是支持Map/Reduce编程模型的参考软件框架。它依赖Hadoop分布式文件系统（HDFS）作为其主存储系统。虽然HDFS不支持将数据同时附加到现有的。。。
阅读更多信息

信息和贡献者

问询处

发布于

HPC’15：高性能计算研讨会论文集

2015年4月

253页

国际标准图书编号：9781510801011

一般主席：
莱恩·T·沃森
弗吉尼亚理工学院和州立大学
,
约瑟夫·温布布
维也纳科技大学
,
课程主席：
Masha Sosonkina公司
艾姆斯实验室和老多米尼克大学
,
威尔·萨克
温思罗普大学

赞助商

SIGSIM:ACM仿真与建模特别兴趣小组
SCS：国际建模与仿真学会

出版商

国际计算机模拟学会

美国加利福尼亚州圣地亚哥

出版历史

出版：2015年4月12日

检查更新

作者标记

限定符

研究文章

会议

2015年春季模拟

赞助商：

SIGSIM公司
南海

SpringSim’15:2015春季模拟多会议

2015年4月12日至15日

弗吉尼亚州亚历山大市

贡献者

其他指标

查看文章指标

文献计量学和引文

文献计量学

文章指标

1
引文总数
查看引文
62
总下载次数

下载次数（过去12个月）三
下载次数（最近6周）0

其他指标

查看作者指标

引文

引用人

查看全部

(2019)分布式文件系统中基于推测语义的读操作算法性能评估国际通信网络与分布式系统杂志10.5555/3337439.333744122:3(275-293)在线发布日期：2019年1月1日
https://dl.acm.org/doi/10.5555/3337439.3337441

引用人

索引术语

建议

提高分布式文件系统中读取操作的性能

一种用于提高快速文件系统中小文件写入性能的多文件写入方案

改进Hadoop map/reduce框架，通过BlobSeer BLOB管理系统支持并发追加

评论

发布于

赞助商

出版商

出版历史

检查更新

作者标记

限定符

会议

其他指标

文章指标

其他指标

引用人

登录选项

完全访问权限

PDF格式

电子阅读器

摘要

工具书类

引用人

索引术语

建议

提高分布式文件系统中读取操作的性能

一种用于提高快速文件系统中小文件写入性能的多文件写入方案

改进Hadoop map/reduce框架，通过BlobSeer BLOB管理系统支持并发追加

评论

问询处

发布于

赞助商

出版商

出版历史

检查更新

作者标记

限定符

会议

贡献者

其他指标

文献计量学

文章指标

其他指标

引文

引用人

获取访问权限

登录选项

完全访问权限

查看选项

PDF格式

电子阅读器

数字

其他

分享

共享此出版物链接

在社交媒体上分享

附属公司