研究论文

丰富的手势，减少控制：约束映射对性能技术的影响

作者:

罗伯特·H·。杰克,

托尼斯托克曼,

安得烈麦克弗森作者信息和声明

MOCO’17：第四届运动计算国际会议记录

条款编号：15，页数1-8

https://doi.org/10.1145/3077981.3078039

出版:2017年6月28日出版历史

获取访问权限

摘要

本文介绍了一项关于专业打击乐器演奏者与简化手摇打击乐器相互作用的观察研究。我们反思了打击乐器演奏者发声手势语言是如何在一个小时的训练过程中发展起来的，重点是他们在训练结束时保留下来的手势词汇的元素，以及那些停止使用的元素。根据这些观察结果，我们提出了一个基于动作的数字乐器模型，作为从多维肢体语言向下投影到一组简化的声音特征或行为。仪器设计的许多因素，除了传感器自由度到控制尺寸的映射之外，还制约着向下投影的方式。我们认为，除了传感器捕捉的手势外，还有一个手势丰富的世界，但可以通过仪器的物理性、组成材料和形式，通过仪器的设计隐式捕捉到手势。我们提供了该模型的实际案例研究。

工具书类

[1]

克劳斯·恩斯特·贝纳和克莱门斯·沃尔纳。2011.看钢琴还是听钢琴？早期视听感知实验和复制的概要。《音乐科学》15，3（2011），324--342。

[2]

弗吉尼亚·布劳恩（Virginia Braun）和维多利亚·克拉克（Victoria Clarke），2006年。在心理学中使用主题分析。心理学定性研究3，2（2006），77--101。

[3]

我的多安坦·达克。2011年，一开始是手势：钢琴触摸和表演身体的现象学。音乐与手势新视角（2011），243--65。

[4]

保罗·多里什（Paul Dourish）。2004.行动在哪里：具体互动的基础。麻省理工学院出版社。

[5]

Georg Essl和Sile O'modhrain。2006年，新有形乐器设计的制定方法。有组织的声音11，03（2006），285--296。

数字图书馆

[6]

罗尔夫·英格·戈德洛伊（Rolf Inge Godöy）、米尼奥·宋（Minho Song）、克里斯蒂安·尼莫恩（Kristian Nymoen）、马里·罗马海姆·豪根（Mari Romarheim Haugen）和亚历山大·雷夫苏姆·延塞尼乌斯。2016年，探索音乐体验中的音效相似性。《新音乐研究杂志》45，3（2016），210-222。

[7]

迈克尔·古雷维奇（Michael Gurevich）、保罗·斯塔普顿（Paul Stapleton）和阿德南·马奎兹·博本（Adnan Marquez-Borbon）。2010年，《电子乐器的风格和限制》。在NIME。106--111.

[8]

迈克尔·S·霍恩。2013年，文化形式在有形交互设计中的作用。在第七届有形、嵌入和具体互动国际会议的会议记录中。美国医学会，117-124。

数字图书馆

[9]

安迪·亨特（Andy Hunt）、马塞洛·万德利（Marcelo M Wanderley）和马修·帕拉迪斯（Matthew Paradis）。2003。参数映射在电子仪器设计中的重要性。《新音乐研究杂志》32，4（2003），429-440。

[10]

Robert H Jack、Tony Stockman和Andrew McPherson。2016.延迟对数字乐器表演者互动和主观质量评估的影响。《2016年音频会议录》。美国医学会，116-123。

数字图书馆

[11]

亚历山大·雷夫苏姆·詹塞尼乌斯（Alexander Refsum Jensenius）、马塞洛·万德利（Marcelo M Wanderley）、罗尔夫·英格·戈德洛伊（Rolf Inge Godöy）和马克·勒曼（Marc Leman）。2009年，音乐手势：研究中的概念和方法。《音乐手势：声音、动作和意义》，罗尔夫·英格·戈德洛伊（Rolf Inge Godöy）和马克·莱曼（Marc Leman）（编辑）。劳特利奇，12-35。

[12]

戈登·库滕巴赫和埃里克·A·胡尔廷。1990年。人机通信中的手势。人机界面设计艺术（1990），309-317。

[13]

马克·莱曼。2008年，具体的音乐认知和调解技术。麻省理工学院出版社。

数字图书馆

[14]

安妮·卢西亚尼（Annie Luciani）、珍妮·卢普·弗洛伦斯（Jean-Loup Florens）、达米安·库鲁塞（Damien Courousse）和克劳德·卡多兹（Claude Cadoz）。2007年，《Ergotic sounds：一种改进数字乐器可玩性、可信度和存在性的新方法》。在启用/07中。ACROE，373--376。

[15]

托尔·马格努森。2010年。设计限制：使用数字音乐系统作曲和表演。《计算机音乐杂志》34，4（2010），62-73。

数字图书馆

[16]

Mark T Marshall、Max Hartshorn、Marcelo M Wanderley和Daniel J Levitin。2009.数字乐器参数调制的传感器选择：来自音高调制的经验证据。JNMR 38，3（2009），241--253。

[17]

安德鲁·麦克弗森和维克托·扎皮。2015.BeagleBone Black上的亚毫秒延迟音频和传感器处理环境。在音频工程学会第138号公约中。音频工程学会。

[18]

卡罗琳娜·布鲁姆·梅德罗斯（Carolina Brum Medeiros）和马塞洛·万德利（Marcelo M Wanderley）。2014.音乐表达设备中传感器和仪器方法的全面综述。传感器14，8（2014），13556--13591。

[19]

爱德华多·雷克·米兰达和马塞洛·万德利。2006.新型数字乐器：键盘以外的控制和交互。第21卷。AR版本。

[20]

Luc Nijs、Micheline Lesaffre和Marc Leman。2009年。乐器作为音乐家的自然延伸。在第五届跨学科音乐学会议上。132--133.

[21]

西尔·奥莫德兰（Sile O'modhrain）。2011年，数字乐器评估框架。《计算机音乐杂志》35，1（2011），28-42。

数字图书馆

[22]

奥托·奥尔特曼。1929.钢琴技术的生理力学：对钢琴演奏中肌肉动作的性质及其对钢琴键和钢琴音调的影响的实验研究。(1929).

[23]

埃里克·谢菲尔德和迈克尔·古雷维奇。2015.打击乐器的分布式机械驱动。在音乐表达新接口国际会议的会议记录中。11--15.

数字图书馆

[24]

Patrick Shove和Bruno H Repp。1995年。音乐动作和表演：理论和经验观点。《表演实践：音乐口译研究》（1995年），第55-83页。

[25]

马克·汤普森和杰夫·勒克。2012.探索钢琴家的身体动作、表达意图和音乐结构元素之间的关系。《音乐科学》16，1（2012），19-40。

[26]

Kai Tuuri、Jaana Parviainen和Antti Pirhonen。2017.谁控制谁？人类技术编排中的具体控制。与计算机交互（2017）。

[27]

凯·图里（Kai Tuuri）、安蒂·皮尔霍宁（Antti Pirhonen）和伊夫·霍根（Eve Hoggan）。2009年。投入产出HCI范式的一些严重缺陷及其对实际设计的影响。《产品之外的设计》（2009）。

[28]

Marcelo M Wanderley和Philippe Depalle。2004。声音合成的手势控制。程序。IEEE 92，4（2004），632--644。

[29]

尼古拉斯·沃德（Nicholas Ward）、凯季·彭菲尔德（Kedzie Penfield）、西尔·奥莫德兰（Sile O’Modhrain）和R本杰明·纳普（R Benjamin Knapp）。2008年，两位部长的研究：走向运动信息工具设计。在NIME。117--121.

[30]

维克托·扎皮（Victor Zappi）和安德鲁·麦克弗森（Andrew McPherson）。2014.数字乐器设计中的维度与挪用。在NIME。455--460.

引用人

莫里森L麦弗逊A(2024)纠缠纠缠：关于HCI和音乐互动的衍射对话2024年CHI计算机系统人为因素会议记录10.1145/3613904.3642171(1-17)在线发布日期：2024年5月11日
https://dl.acm.org/doi/10.1145/3613904.3642171
案例F麦弗逊A桑德勒M(2023)带信封学习的调频音频传输第18届国际音频会议记录10.1145/3616195.3616196(116-123)在线发布日期：2023年8月30日
https://dl.acm.org/doi/10.1145/3616195.3616196
皮格雷姆J麦克弗森ABryan Kinns N公司千斤顶R(2022)声音->物体->手势：虚拟材料的物理成本第17届国际音频会议记录10.1145/3561212.3561230(59-66)在线发布日期：2022年9月6日
https://dl.acm.org/doi/10.1145/3561212.3561230
显示更多引用人

索引术语

丰富的手势，减少的控制：约束映射对性能技术的影响
1. 应用计算
  1. 艺术与人文
    1. 声音和音乐计算
2. 以人为中心的计算
  1. 交互设计
    1. 交互设计理论、概念和范式

建议

使用集成metatone探索iPad上的打击手势
CHI'14：SIGCHI计算机系统人为因素会议记录

打击乐器演奏家在西方古典乐器演奏家中是独一无二的，因为他们的艺术实践是由互动的方法而不是他们的乐器来定义的。虽然打击乐器演奏者习惯于探索非传统物体来创作。。。
扩展和嵌入数字乐器和增强乐器的高级手势词汇
人机界面和信息管理。与信息交互
摘要
本文报告了正在进行的探索数字和增强乐器手势词汇是如何随着时间的推移而发展的，以及在这些乐器中嵌入高级手势描述符如何促进它们的使用和。。。
MubuFunkScatShare：手势能量和共享互动音乐
CHI EA’13:CHI’13计算机系统人为因素扩展摘要

我们展示了一种滑稽的交互式音乐表演，它允许通过用户的动作重新播放现场录制的声音。交互设计使控件类似于震动器，其中运动能量驱动播放音乐的能量。。。

评论

信息和贡献者

问询处

发布于

封面图片ACM其他会议

MOCO’17：第四届运动计算国际会议记录

2017年6月

206页

国际标准图书编号：9781450352093

内政部：10.1145/3077981

会议主席：
马可·吉利斯,
编辑：
基奥娜·尼豪斯

版权所有©2017 ACM。

如果复制品不是为了盈利或商业利益而制作或分发的，并且复制品的第一页载有本通知和完整引文，则允许免费制作本作品的全部或部分数字或硬拷贝以供个人或课堂使用。必须尊重作者以外的其他人对本作品组成部分的版权。允许用信用证进行摘要。要以其他方式复制或重新发布，在服务器上发布或重新发布到列表，需要事先获得特定许可和/或付费。从请求权限[电子邮件保护].

合作中

萨里大学

出版商

计算机协会

美国纽约州纽约市

出版历史

出版：2017年6月28日

权限

请求对此文章的权限。

检查更新

作者标记

限定符

研究文章
研究
推荐有限公司

资金来源

工程和物理科学研究委员会

会议

2017年MOCO

MOCO’17：第四届运动计算国际会议

2017年6月28日至30日

英国伦敦

接受率

总体接受率185份提交文件中的85份，46%

贡献者

其他指标

查看文章指标

文献计量学和引文

文献计量学

文章指标

11
引用总数
查看引文
140
总下载次数

下载次数（过去12个月）17
下载次数（最近6周）0

反映截至2024年9月15日的下载量

其他指标

查看作者指标

引文

引用人

莫里森L麦弗逊A(2024)纠缠纠缠：关于HCI和音乐互动的衍射对话2024年CHI计算机系统人为因素会议记录10.1145/3613904.3642171(1-17)在线发布日期：2024年5月11日
https://dl.acm.org/doi/10.1145/3613904.3642171
容器F麦弗逊A桑德勒M(2023)带信封学习的调频音频传输第18届国际音频会议记录10.1145/3616195.3616196(116-123)在线发布日期：2023年8月30日
https://dl.acm.org/doi/10.1145/3616195.3616196
皮格雷姆J麦克弗森ABryan Kinns N公司千斤顶R(2022)声音->物体->手势：虚拟材料的物理成本第17届国际音频会议记录10.1145/3561212.3561230(59-66)在线发布日期：2022年9月6日
https://dl.acm.org/doi/10.1145/3561212.3561230
贝尼托·坦普拉诺A麦弗逊A(2021)用于电吉他手势采集和消歧的TMR角度传感器第16届国际音频大会会议记录10.1145/3478384.3478427(256-263)在线发布日期：2021年9月1日
https://dl.acm.org/doi/10.1145/3478384.3478427网址
老鼠L麦弗逊A(2021)大型声学乐器演奏者的认知体现——一种设计新型大型数字乐器的方法感知、表征、图像、声音、音乐10.1007/978-3-030-70210-6_37(577-590)在线发布日期：2021年3月10日
https://doi.org/10.1007/978-3-030-70210-6_37
莫罗G麦弗逊A(2020)连续键盘乐器的演奏者体验计算机音乐杂志10.1162/comj_a_0056544:2-3(69-91)在线发布日期：2020年7月27日
https://doi.org/10.1162/comj_a_00565
Berdahl E公司布兰迪诺·M伯恩浩普特R米勒FVerweij D公司安德烈斯·J麦格雷内尔J考克本A阿韦利诺一世戈盖A比约恩·P赵S萨姆森B科西尔尼克R(2020)将音乐家在数字乐器上表演建模为通信通道2020年CHI计算机系统人为因素会议的扩展摘要10.1145/3334480.3382841(1-7)在线发布日期：2020年4月25日
https://dl.acm.org/doi/10.1145/3334480.3382841
麦弗逊A塔哈罗卢K(2020)计算机音乐语言中的成语模式及其美学影响有组织的声音10.1017/S135577181900046325:1(53-63)在线发布日期：2020年3月4日
https://doi.org/10.1017/S1355771819000463
阿米蒂奇J麦弗逊A(2019)混合数字路瑟背景下的贿赂第14届国际音频大会会议记录：声音之旅10.1145/3356590.3356604(82-89)在线发布日期：2019年9月18日
https://dl.acm.org/doi/10.1145/3356590.3356604
莫雷尔F阿米蒂奇J麦弗逊A(2018)乐器结构变化对小提琴演奏的影响心理学前沿10.3389/fpsyg.2018.024369在线发布日期：2018年12月6日
https://doi.org/10.3389/fpsyg.2018.02436
显示更多引用人

视图选项

获取访问权限

登录选项

请检查您是否可以通过登录凭据或您的机构访问此文章以获得完全访问权限。

完全访问权限

获取此出版物

查看选项

PDF格式

以PDF文件查看或下载。

电子阅读器

使用联机查看电子阅读器.

电子阅读器

媒体

数字

其他

桌子