研究论文

使用YCSB对云服务系统进行基准测试

作者:

布莱恩·F·。库珀,

亚当西尔伯斯坦,

欧文 Tam公司,

拉古拉马克里希南，以及

罗素西尔斯作者信息和声明

SoCC’10：第一届ACM云计算研讨会会议记录

2010年6月

页143-154

https://doi.org/10.1145/1807128.1807152

出版:2010年6月10日出版历史

获取访问权限

摘要

虽然MapReduce系统（如Hadoop）在大规模数据分析中的使用得到了广泛的认可和研究，但我们最近看到为云数据服务开发的系统数量激增。这些较新的系统处理“云OLTP”应用程序，但它们通常不支持ACID事务。建议用于云服务的系统示例包括BigTable、PNUTS、Cassandra、HBase、Azure、CouchDB、SimpleDB、Voldemort和许多其他系统。此外，它们正被应用于各种各样的应用程序，这些应用程序与传统的（例如，类似TPC-C的）服务工作负载有很大不同。新兴云服务系统的数量和广泛的拟议应用程序，再加上缺乏应用程序到应用程序的性能比较，使得很难理解系统与适合它们的工作负载之间的权衡。我们提出了“雅虎云服务基准”（YCSB）框架，旨在促进新一代云数据服务系统的性能比较。我们为四个广泛使用的系统定义了一组核心基准并报告结果：Cassandra、HBase、Yahoo的PNUTS，以及一个简单的分片MySQL实现。我们还希望通过开放源码提供我们的基准测试工具，促进代表其他应用程序类的额外云基准测试套件的开发。在这方面，YCSB框架/工具的一个关键特性是它是可扩展的——它支持轻松定义新的工作负载，还可以轻松地对新系统进行基准测试。

工具书类

[1]

亚马逊SimpleDB。http://aws.amazon.com/simpledb/。

[2]

阿帕奇·卡桑德拉。http://孵化器.apache.org/cassandra/。

[3]

Apache CouchDB。http://couchdb.apache.org/。

[4]

阿帕奇HBase。http://hadoop.apache.org/hbase/。

[5]

Dynomite框架。http://wiki.github.com/cliffmoon/dynomite/dynomite框架。

[6]

谷歌应用程序引擎。http://appengine.google.com。

[7]

超稳定。http://www.hypertable.org/。

[8]

蒙哥德。http://www.mongodb.org/。

[9]

伏地魔计划。http://project-voldemort.com/。

[10]

Solaris FileBench。http://www.solarisinternals.com/wiki/index.php/FileBench。

[11]

SQL数据服务/Azure服务平台。http://www.microsoft.com/azure/data.mspx。

[12]

存储性能委员会。http://www.storageperformance.org/home。

[13]

雅虎！查询语言。http://developer.yahoo.com/yql/。

[14]

A.Arasu等人。线性道路：流数据管理基准。VLDB，2004年。

数字图书馆

[15]

F.C.Botelho、D.Belazzougui和M.Dietzfelbinger。压缩、散列和置换。程序中。2009年第17届欧洲算法研讨会。

[16]

F.Chang等人，Bigtable：一种用于结构化数据的分布式存储系统。在OSDI，2006年。

数字图书馆

[17]

B.F.Cooper等人。PNUTS:Yahoo！'s托管数据服务平台。VLDB，2008年。

数字图书馆

[18]

G.DeCandia等人。Dynamo：亚马逊高度可用的键值商店。SOSP，2007年。

数字图书馆

[19]

D.J.德维特。威斯康星州基准：过去、现在和未来。J.Gray，《基准手册》编辑。摩根·考夫曼，1993年。

[20]

I.欧洲。与卡桑德拉展望未来。http://blog.digg.com/？p=966。

[21]

S.Gilbert和N.Lynch。布鲁尔猜想和一致、可用、分区容忍web服务的可行性。ACM SIGACT新闻，33（2）：51-592002。

数字图书馆

[22]

J.Gray，编辑。数据库和事务处理系统基准手册。摩根·考夫曼，1993年。

数字图书馆

[23]

J.Gray等人快速生成了数十亿条记录的合成数据库。SIGMOD，1994年。

数字图书馆

[24]

A.Lakshman、P.Malik和K.Ranganathan。Cassandra：P2P网络上的结构化存储系统。SIGMOD，2008年。

[25]

B.C.Ooi和S.Parthasarathy。云计算平台数据管理专题。IEEE数据工程Bulletin，第32卷，2009年。

[26]

A.Pavlo等人，大规模数据分析方法的比较。SIGMOD，2009年。

数字图书馆

[27]

罗森（R.Rawson）。HBase简介。2009年，在NoSQL奥克兰。

[28]

A.Schmidt等人。Xmark：XML数据管理的基准。VLDB，2002年。

数字图书馆

[29]

R.Sears、M.Callaghan和E.Brewer。Rose：压缩的日志结构复制。VLDB，2008年。

数字图书馆

[30]

M.Seltzer、D.Krinsky、K.A.Smith和X.Zhang。应用程序特定基准测试的案例。程序中。HotOS，1999年。

数字图书馆

[31]

P.Shivam等人，《捷径：服务器基准测试的工作台自动化》。程序中。USENIX年度技术会议，2008年。

数字图书馆

[32]

M.Stonebraker等人，《C-store:一个面向专栏的DBMS》，《VLDB》，2005年。

数字图书馆

[33]

B.White等人。分布式系统和网络的集成实验环境。OSDI，2002年。

数字图书馆

[34]

K.Yocum等人。大规模网络仿真器中的可扩展性和准确性。OSDI，2002年。

数字图书馆

引用人

张C徐C胡H徐杰马XY元(2024)科尔第22届USENIX文件和存储技术会议记录10.5555/3650697.3650717(329-346)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650717
任毅任毅李X胡毅李杰李·P马XY元(2024)电气第22届USENIX文件和存储技术会议记录10.5555/3650697.3650715(293-310)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650715
张伟徐娥王Q张X顾毅（Gu Y）卢Z欧阳T戴G彭伟Xu Z公司张S吴D彭Y王T张H王杰严W东Y姚W吴Z朱莉（Zhu L）石C王毅刘瑞（Liu R）吴杰朱J吴杰马XY元(2024)EBS荣耀的故事是什么第22届USENIX文件和存储技术会议记录10.5555/3650697.3650714(277-292)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650714
显示更多引用者

索引术语

使用YCSB对云服务系统进行基准测试
1. 信息系统
  1. 信息检索
    1. 检索结果评估

建议

在云中对OLTP/web数据库进行基准测试：OLTP-bench框架
CloudDB’12：第四届云数据管理国际研讨会会议记录

基准测试是构建和调整数据管理系统的一项关键活动，但由于缺乏参考工作负载和通用平台，这是一项耗时且痛苦的任务。随着云技术的出现，对这种工具的需求越来越强烈。。。
阅读更多信息
使用Cloud WorkBench对基础设施即服务（IaaS）云进行性能基准测试
2019年ACM/SPEC性能工程国际会议指南

云计算市场的持续增长带来了具有不同性能特征的云服务的前所未有的多样性。为了支持服务选择，研究人员和从业者通过以下方式进行云性能基准测试。。。
阅读更多信息
大数据测试和基准测试中的问题
DBTest’13：第六届数据库系统测试国际研讨会会议记录

学术界和业界目前正在研究和构建下一代数据管理系统。这些系统旨在分析具有高数据摄取率和短响应时间的高容量数据集，以执行复杂的。。。
阅读更多信息

评论

信息和贡献者

问询处

发布于

封面图片ACM会议

SoCC’10：第一届ACM云计算研讨会会议记录

2010年6月

264页

国际标准图书编号：9781450300360

内政部：10.1145/1807128

总主席：
约瑟夫·海勒斯坦
美国加州大学伯克利分校
,
课程主席：
苏拉吉特·乔杜里
微软研究院，美国
,
罗森布拉姆
美国斯坦福大学

版权所有©2010 ACM。

允许制作本作品的全部或部分数字或硬拷贝供个人或课堂使用，但不收取任何费用，前提是复制品的制作或分发不是为了盈利或商业利益，并且复制品在首页注明本通知和完整引文。必须尊重ACM以外的其他人对本作品组成部分的版权。允许用信用证进行摘要。要以其他方式复制或重新发布，在服务器上发布或重新发布到列表，需要事先获得特定许可和/或付费。从请求权限[电子邮件保护]

赞助商

出版商

计算机协会

美国纽约州纽约市

出版历史

出版：2010年6月10日

权限

请求对此文章的权限。

检查更新

作者标记

限定符

研究文章

会议

SOCC’10公司

赞助商：

SOCC’10：ACM SIGMOD-SIGOPS云计算研讨会与SIGMOD 2010

2010年6月10日至11日

印第安纳州、印第安纳波利斯州、美国

接受率

722份提交文件的总体接受率为169份，23%

贡献者

其他指标

查看文章指标

文献计量学和引文

文献计量学

文章指标

2,595
引文总数
查看引文
9,466
总下载次数

下载量（最近12个月）729
下载次数（最近6周）52

其他指标

查看作者指标

引文

引用人

张C徐C胡H徐杰马XY元(2024)科尔第22届USENIX文件和存储技术会议记录10.5555/3650697.3650717(329-346)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650717
任毅任毅李X胡毅李杰李·P马XY元(2024)电气第22届USENIX文件和存储技术会议记录10.5555/3650697.3650715(293-310)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650715
张伟徐娥王Q张X顾毅（Gu Y）卢Z欧阳T戴G彭伟Xu Z公司张S吴D彭Y王T张H王杰严W东Y姚W吴Z朱莉（Zhu L）石C王毅刘瑞（Liu R）吴杰朱J吴杰马XY元(2024)EBS荣耀的故事是什么第22届USENIX文件和存储技术会议记录10.5555/3650697.3650714(277-292)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650714
徐Y朱H潘迪·P康威A约翰逊R甘尼桑A阿拉加潘R马XY元(2024)爱奥尼亚第22届USENIX文件和存储技术会议记录10.5555/3650697.3650711(225-242)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650711
朱Z赵Y刘Z马XY元(2024)使用NetMigrate进行内存键值存储实时迁移第22届USENIX文件和存储技术会议记录10.5555/3650697.3650710(209-224)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650710
赵·K崔JKwon H（千瓦时）金·J马XY元(2024)射频使用第22届USENIX文件和存储技术会议记录10.5555/3650697.3650706(141-158)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650706
戴Y刘杰阿帕西·杜塞奥AArpaci-Dusseau R公司马XY元(2024)共生第22届USENIX文件和存储技术会议记录10.5555/3650697.3650701(51-70)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650701
张杰任毅Nguyen M公司最小值C坎南S马XY元(2024)OmniCache（Omni缓存）第22届USENIX文件和存储技术会议记录10.5555/3650697.3650700(35-50)在线发布日期：2024年2月27日
https://dl.acm.org/doi/10.5555/3650697.3650700
哈希米WAtiq S公司侯赛因·M贾维德·K(2024)Syntose环境下复制Gluster从智能电网获取虚拟数据存储的远程传输能源10.3390/en1710234417:10(2344)在线发布日期：2024年5月13日
https://doi.org/10.3390/en17102344
邦蒂努ATudose C公司(2024)使用JPA、Hibernate、Spring Data的Java程序对关系数据库中CRUD操作的性能分析和改进应用科学10.3390页/第14072743页14:7(2743)在线发布日期：2024年3月25日
https://doi.org/10.3390/app14072743
显示更多引用者

视图选项

获取访问权限

登录选项

检查您是否可以通过登录凭据或您的机构访问本文。

完全访问权限

获取此出版物

视图选项

PDF格式

以PDF文件查看或下载。

电子阅读器

使用联机查看电子阅读器.

电子阅读器

媒体

数字

其他

桌子