一种基于智能移动终端的音乐创作系统

技术领域

本发明涉及音乐技术领域，尤其是涉及一种基于智能移动终端的音乐创作系统。

背景技术

计算机时代对乐器和音乐的定义也发生了极大的转变，从人声到电子，从模拟到数字的实现，以及随机作曲、算法编曲的出现，开辟了电子音乐这一整个大分类。音乐界面，即音乐发生的媒介，通过乐器这一形态进行音乐情感表达。新音乐界面的概念来源于NIME大会，一个致力于研究新技术的发展对音乐表达和艺术表演的作用的国际会议--TheInternational Conference on New Interfaces for Musical Expression。该会议始于2001年美国西雅图，此后每年在全球不同城市举行，来自世界各地的研究者和音乐家分享他们在新音乐界面设计和人机音乐交互方面的最新工作、传递知识。NIME通常也被称作新奇乐器(Novel Instrument)或计算机音乐表达新接口。因此，可以宽泛的定义“新乐器”为结合MIDI技术、计算机编程以及其他类型的可发声、可“演奏”的原创电子“乐器”。

现有的“新乐器”开发，主要依旧基于计算机本身的运算能力和音频处理能力，多使用迷笛(MIDI)键盘等框架，仿照现有原声乐器的演奏方式，进行模拟，可称之为“类乐器型的控制器型新乐器”。另外有一大类是基于现有声学乐器的“增强乐器”，通过在结构上叠加传感器的控制器，扩展声音和音乐参数的一种数字乐器。

因此，由于面临“集成性”和“实用性”的难题，“新乐器”平台不能较为完整的包括从数据捕捉处理到参数映射到声音合成算法处理，最后到发聩发声这一流程。同时也因此，面临不同设备零部件组装和性能的巨大差异，不能给演奏家和作曲家带来较为舒适的创作工具。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种方便灵活、提高使用者体验感的基于智能移动终端的音乐创作系统。

本发明的目的可以通过以下技术方案来实现：

一种基于智能移动终端的音乐创作系统，包括：

嵌套套件模块，用于支撑所述智能移动终端；

传感器模块，接收手势控制信号；

界面参数控制模块，响应触摸式触发信号，产生第一音频参数控制指令；

传感器信号分析模块，对所述手势控制信号进行解析，根据预设的声音设计映射关系，产生第二音频参数控制指令；

音频数字信号处理模块，根据所述第一音频参数控制指令和第二音频参数控制指令对待处理的音频素材进行相应效果处理；

混音处理模块，对经效果处理后的音频信号进行混音处理后输出；

所述传感器模块、界面参数控制模块、传感器信号分析模块、音频数字信号处理模块和混音处理模块内置于所述智能移动终端中。

进一步地，所述嵌套套件模块为3D打印套件。

进一步地，所述嵌套套件模块包括单手手持底板以及设置于单手手持底板上的终端边缘固定件和扩声器。

进一步地，所述嵌套套件模块包括套设于所述智能移动终端外的终端嵌套件以及与所述终端嵌套件一体化设置的音频输出连接线保护件。

进一步地，所述音频输出连接线保护件与所述智能移动终端的耳机口位置对应。

进一步地，所述传感器模块包括陀螺仪、重力传感器、加速度传感器和光传感器。

进一步地，所述第一音频参数控制指令包括音频开关信号、模式切换信号、基础参数调制信号中的一个或多个。

进一步地，所述第二音频参数控制指令包括效果器参数和/或模式切换信号。

进一步地，所述音频数字信号处理模块内存储有基于Faust语言编写的音频数字信号处理程序。

进一步地，所述音频数字信号处理模块中的相应效果处理包括单一音频DSP处理模式和多音频DSP处理切换模式。

与现有技术相比，本发明具有如下有益效果：

1)本发明集成于智能移动终端中，可以更好的帮助电子音乐创作者便捷地进行新型乐器的音乐创作制作，更好的实践电子音乐乐器和智能设备的融合。

2)本发明设置有嵌套套件模块，由3D打印而成，且根据需要采用不同套件结构，更方便灵活实现新乐器创作。

3)本发明的传感器信号分析模块可对传感器模块获得的原始传感器参数进行运算处理，以实现更加完善的数据归类，建立参数数据库，为后续参数的准确调用提供基础，更灵活地应对多种演奏的需求，方便创作者甚至创作团队在不同的环境下进行创作和演出，极大的满足根据不同作品特性进行升级改造个性化定制的需求。

4)本发明的音频数字信号处理模块基于Faust语言编写，Faust(FunctionalAudio Stream)是一种用于声音合成和音频处理的功能性编程语言，着重于合成器，乐器，音频效果等的设计，有助于形成一个专业音频处理型的新型乐器创作平台系统，更完整地适配当代电子音乐创作的需求。

5)本发明将各模块仅集成于一智能移动终端中，做到尽可能低的延迟和信号损失，尽可能少地依赖计算机等外置设备。

6)本发明的各模块采用标准化设计，保留融合智能移动终端视觉处理、人工智能等各方面的可能性，方便后续的升级发展普及。

附图说明

图1为本发明的结构示意图；

图2为本发明一种嵌套套件模块的结构示意图；

图3为本发明另一种嵌套套件模块的结构示意图。

具体实施方式

下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。

实施例1

本实施例提供一种基于智能移动终端的音乐创作系统，包括嵌套套件模块1、传感器模块2、界面参数控制模块3、传感器信号分析模块4、音频数字信号处理模块5和混音处理模块6，嵌套套件模块1用于支撑智能移动终端，传感器模块2、界面参数控制模块3、传感器信号分析模块4、音频数字信号处理模块5和混音处理模块6内置述智能移动终端中。该系统可方便灵活地依据接收到的手势控制信号和触摸式触发信号，对音乐素材进行相应效果，协同各节点的音乐创作和效果处理，输出最终音乐，以便于实现当代新媒体声音艺术中“新乐器”的创作和演出实践。

嵌套套件模块1为3D打印套件，起到保护作用的同时方便演奏者的手势控制等特定演奏操作。如图2所示，本实施例中，智能移动终端为手机，嵌套套件模块1包括单手手持底板11以及设置于单手手持底板11上的终端边缘固定件12和扩声器13，终端边缘固定件12上下固定手机边缘，扩声器13为用于扩声手机扬声器的广口喇叭。采用上述结构嵌套套件模块可形成一普通版本音乐创作系统。

传感器模块2接收手势控制信号，所述手势控制包括使用者双手在xyz三轴方向上下左右前后指向、三轴旋转、三轴加速度等。

界面参数控制模块3响应触摸式触发信号，产生第一音频参数控制指令，可供演奏者根据个人偏好进行设置并保存。所述第一音频参数控制指令包括音频开关信号、多音频DSP处理的模式切换信号、基础参数调制信号等。

传感器模块包括陀螺仪、重力传感器、加速度传感器和光传感器等。触摸式触发信号为使用触摸智能移动终端屏幕的特定位置或区域而产生的触发事件，基于该触发事件可将对应的开关和连续性控制信息向后续模块传输。界面参数控制模块3在智能移动终端屏幕上呈现有操作界面。

传感器信号分析模块4对所述手势控制信号进行解析，根据预设的声音设计映射关系，产生第二音频参数控制指令。所述第二音频参数控制指令包括效果器参数、多音频DSP处理的模式切换信号等。

音频数字信号处理模块5根据所述第一音频参数控制指令和第二音频参数控制指令对待处理的音频素材进行相应效果处理。音频数字信号处理模块5内存储有基于Faust语言编写的音频数字信号处理程序。在普通版本音乐创作系统中，音频数字信号处理模块可采用单一音频DSP处理模式，不需要进行状态场景的切换。

音频素材主要包括两大类，一类是基于制作好的音频文件，一类是基于算法声音合成的电子音乐。界面参数控制模块3可根据使用者的触发信号进行音频素材的替换和效果器模块的更改替换。

混音处理模块6对经效果处理后的音频信号进行混音处理后输出。混音处理包括调节不同音频素材之间的比例等操作。形成的最终信号可通过智能手机内置麦克风直接输出，或者通过音频线输出较为完整频率波段的立体声音频信号供后端扩声。

实施例2

本实施例提供的基于智能移动终端的音乐创作系统中，嵌套套件模块1的结构如图3所示，包括套设于所述智能移动终端外的终端嵌套件14以及与所述终端嵌套件14一体化设置的音频输出连接线保护件15。音频输出连接线保护件15与所述智能移动终端的耳机口位置对应。终端嵌套件14正面半包围嵌套的手机套，触摸屏部分做部分遮盖保护，仅保留演奏者操作区域。音频输出连接线保护件15用于保护音频输出连接线的连接稳定。采用上述结构嵌套套件模块可形成一专业版本音乐创作系统。

在专业版本音乐创作系统下，音频数字信号处理模块5采用多音频DSP处理切换模式，按照声音设计，存在多个音频处理子模块，形成不同的状态场景，默认通过演奏者固定的手势触发切换，设定不同演奏段落所对应的不同的音色。通过混音处理模块6的混音处理后形成立体声耳机信号。

以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。