声音信号处理方法及声音信号处理装置与流程

1.本发明涉及一种声音信号处理方法及声音信号处理装置。

背景技术：

2.当前，已知一种为了提高音响效果，对声音信号实施各种处理而进行混合的声音信号处理装置。例如，专利文献1、2将立体声音响信号变换为和信号及差信号，在对和信号、差信号分别实施了音响效果等的处理之后，再次变换为立体声音响信号。通过上述，能够多样且容易地对立体声音响信号的音响效果进行调整。或者，能够提供不适感少的声音。
3.专利文献1：日本特开2018－116153号公报
4.专利文献2：日本特开2017－220789号公报
5.但是，音乐效果等想要施加的处理内容、想要输出声音信号的输出目标根据声音信号而不同。因此，在从多个系统取得大量的声音信号的情况下，有时为了对各个声音信号实施适当的处理，变换设备增加而设备连接变得复杂。

技术实现要素：

6.本发明的一个目的在于，提供能够避免设备连接的复杂化，并且针对每个声音信号实施适当的处理而向适当的输出目标输出的声音信号处理方法及声音信号处理装置。
7.根据本发明的一个方式，提供一种声音信号处理方法，第1处理部对第1声音信号进行第1处理而生成第2声音信号，并且将所述第2声音信号向混频总线输出，第2处理部对第3声音信号进行第2处理而生成第4声音信号，并且将所述第4声音信号向所述混频总线和第1输出目标输出，所述混频总线将所述第2声音信号和所述第4声音信号混合而生成第5声音信号，并且将所述第5声音信号向第2输出目标输出。
8.发明的效果
9.根据本发明的一个方式，能够避免设备连接的复杂化，并且针对每个声音信号实施适当的处理而向适当的输出目标输出。
附图说明
10.图1是声音信号处理装置的框图。
11.图2是表示与信号处理相关的结构的框图。
12.图3是处理部的详细的框图。
13.图4是表示双耳化部的信号的流动的图。
14.图5是表示deesser的详细结构的图。
具体实施方式
15.以下，参照附图对本发明的实施方式进行说明。
16.图1是本发明的一个实施方式涉及的声音信号处理装置的框图。该声音信号处理
装置100作为一个例子而构成为混频器装置。声音信号处理装置100具有cpu 11，cpu 11经由总线10而与多个构成要素对信息进行交换。声音信号处理装置100具有rom 12、ram 13、存储部14、显示部15、设定操作部16。另外，声音信号处理装置100具有用于连接外部设备的各种接口，经由各种接口而在所连接的外部设备和cpu 11之间对信号进行输入输出。在各种接口中包含通信部17、第1传声器输入端子18、第2传声器输入端子19、aux端子20、usb端子21、hdmi(注册商标)输入端子22、hdmi输出端子23、耳机输出端子24、扬声器输出端子25。
17.在cpu 11连接有未图示的计时器。cpu 11对本装置整体进行控制。rom 12存储由cpu 11执行的控制程序、各种表数据等。ram 13存储各种数据。存储部14存储包含上述控制程序的各种应用程序、各种数据。设定操作部16接受来自用户的各种信息的输入。显示部15对各种信息进行显示。通信部17也可以包含lan接口、midi(musical instrument digital interface)。
18.在第1传声器输入端子18、第2传声器输入端子19可以连接外部传声器。例如，在第1传声器输入端子18连接第1传声器26，在第2传声器输入端子19连接耳机(headphone)31和成套的第2传声器27。在aux端子20连接智能机等通信终端装置28。在usb端子21连接usb设备、例如作为个人计算机的pc 29。在hdmi输入端子22、hdmi输出端子23可以连接hdmi设备。例如，在hdmi输入端子22连接游戏装置30，在hdmi输出端子23连接显示监视器42。在耳机输出端子24连接耳机31。在扬声器输出端子25连接扬声器32。扬声器32不限于2通道扬声器，也可以是环绕扬声器，发音的通道数例如为8通道(7.1ch)。
19.图2是表示声音信号处理装置100的与信号处理相关的结构的框图。声音信号处理装置100具有处理部a、b、c、混频总线34、切换部33、35等。此外，处理部a、b、c的功能除了必要的硬件以外，主要通过cpu 11、rom 12及ram 13的协同动作而实现。混频总线34、切换部33、35的动作通过cpu 11进行控制。
20.由游戏装置30生成并从hdmi输入端子22输入的信号sd输出至hdmi输出端子23，供给至显示监视器42。信号sd包含影像信号，基于信号sd的影像在显示监视器42进行显示。此外，信号sd也可以包含声音信号，在hdmi输出端子23连接有音响设备的情况下，基于信号sd的音响从音响设备产生。
21.由游戏装置30生成并从hdmi输入端子22输入的声音信号、或者由pc 29生成并从usb端子21输入的声音信号，作为声音信号sc而输入至处理部a。声音信号sc是3通道以上的通道数的声音信号，在本实施方式设为8通道的信号。处理部a通过对声音信号sc实施a处理(将后述)而生成声音信号sg，并且将声音信号sg向混频总线34输出。
22.由通信终端装置28生成并从aux端子20输入的声音信号、或者由pc 29生成并从usb端子21输入的声音信号，作为声音信号sb而输入至处理部b。作为声音信号sb，例如假想语音聊天的声音信号。声音信号sb例如通过由通信终端装置28或pc 29执行的应用软件生成。处理部b通过对声音信号sb实施b处理而生成声音信号sf，并且将生成的声音信号sf向混频总线34输出。
23.切换部33排他性地选择由第1传声器26集音并从第1传声器输入端子18输入的声音信号、和由第2传声器27集音并从第2传声器输入端子19输入的声音信号。例如选择连接有传声器的传声器输入端子，在双方的传声器输入端子连接有传声器的情况下，优先选择第2传声器输入端子19。而且，切换部33将来自所选择的传声器输入端子的声音信号作为声
音信号sa向处理部c输出。
24.处理部c通过对声音信号sa实施c处理而生成声音信号se，并且将声音信号se向混频总线34输出。c处理例如包含音乐效果、电平调整等。并且，处理部c将所生成的声音信号se向aux端子20和usb端子21输出。此时，也可以插入d/a变换、2通道化等处理。因此，向与aux端子20、usb端子21分别连接的通信终端装置28、pc 29输出声音信号se。根据通信终端装置28、pc 29中的设定，产生与声音信号se相应的音响。
25.此外，a处理、b处理、c处理是互不相同的处理。另外，声音信号sa设为从传声器输入，但也可以是从与声音信号sc的输入系统不同的系统输入的信号。另外，不经由混频总线34而输出的声音信号se的输出目标(与aux端子20或usb端子21连接的装置)与声音信号sh的输出目标(与耳机输出端子24或扬声器输出端子25连接的装置)不同即可。
26.混频总线34至少将声音信号sg和声音信号se混合而生成声音信号sh。在本实施方式，在声音信号sg和声音信号se的基础上还将声音信号sf混合而生成声音信号sh。混频总线34经由切换部35向耳机输出端子24或扬声器输出端子25输出声音信号sh。这里，声音信号sh包含耳机用信号sh－1及扬声器用信号sh－2。切换部35排他性地选择声音信号sh的输出目标。例如，在耳机31与耳机输出端子24连接的情况下，选择耳机输出端子24作为输出目标，在耳机31没有与耳机输出端子24连接的情况下，选择扬声器输出端子25作为输出目标。在选择了耳机输出端子24的情况下，耳机用信号sh－1输出至耳机31。在选择了扬声器输出端子25的情况下，扬声器用信号sh－2输出至扬声器32。此外，在切换部35输出声音信号sh时，也可以实施电平调整、d/a变换。特别是，在输出耳机用信号sh－1的情况下，还可以实施与耳机相匹配的输出特性的调整。
27.图3是处理部a的详细的框图。处理部a由前级处理部a－1和后级处理部a－2构成。a处理由基于前级处理部a－1进行的双耳化处理和基于后级处理部a－2进行的周围声音强调处理构成。前级处理部a－1包含双耳化部(binauralization department)36。后级处理部a－2包含ms变换部37、deesser(嘶声消除器)38、peq 39、lr变换部40、peq 41。作为一个例子，peq 39、41都是为4band(频带)的参数均衡器。但是，peq 39、41可以不是4band，另外也可以不是peq，例如可以是图形均衡器(geq)。
28.图4是表示双耳化部36的信号的流动的图。声音信号sc作为一个例子，是由7.1ch(c：中间、l：前l、r：前r、sl：环绕l、sr：环绕r、bl：环绕后l、br：环绕后r、lfe：低音炮)构成的音频信号。
29.头部相关传递函数(hrtf：head related transfer function)是表现从设置于某个位置的虚拟扬声器分别到达左右耳朵的声音的大小、到达时间及频率特性之差的脉冲响应(impulse response)。对lfe以外的信号应用与各个信号相应的hrtf及混响(reverb)。应用混响是为了重现与音源的距离感。但是，lfe由于难以感知到定位，因此不适用hrtf及混响。8通道的声音信号sc经由通过双耳化部36进行的双耳化处理而进行立体声化，即，变换为l和r这2通道的立体声信号。该立体声信号被作为声音信号si而输入至后级处理部a－2的ms变换部37。
30.在后级处理部a－2(图3)，ms变换部37根据声音信号si而生成和信号sj及差信号sk。如果用l表示声音信号si的左信号，用r表示右信号，则和信号sj通过sj＝(si的l)/2+(si的r)/2进行计算。另外，差信号sk通过sk＝(si的l)/2－(si的r)/2进行计算。
31.图5是表示deesser 38的详细结构的图。deesser 38具有hpf(高通滤波器)、lpf(低通滤波器)、comp(压缩器)等，生成针对和信号sj进行了使中音域的声压减少的处理的处理后和信号sl。peq 39生成针对差信号sk进行了使规定频带的声压增加的处理的处理后差信号sm。
32.例如，在进行射击游戏时，通过deesser 38降低因游戏用户的操作发出的声，嘈杂得到缓和。另外，通过peq 39，侧部的声音得到强调，容易获知进行射击的敌人的脚步声。因此，规定频带不被限定，但为了容易听到周围的声音，优选是主要包含周围的声音之类的容易感知方向性的频率的频带。
33.lr变换部40通过将处理后和信号sl和处理后差信号sm变换为立体声信号而生成声音信号sn。如果用l表示声音信号sn的左信号，用r表示右信号，则声音信号sn的l信号通过sl+sm进行计算。声音信号sn的r信号通过sl－sm进行计算。peq 41根据设定而针对声音信号sn增减各频带的声压。通过上述，被调整了整体的音质的声音信号sg从处理部a输出。此外，并非必须设置peq 41。
34.处理部b(图2)针对声音信号sb实施的b处理作为一个例子，包含针对语音聊天的双耳化处理。例如，针对声音信号sb应用hrtf和混响中的至少一者，生成立体声信号即声音信号sf。此外，cpu 11也可以通过来自用户的切换指示，对应用hrtf和混响的哪个进行切换。另外，也可以根据来自用户的切换指示而不应用hrtf和混响的任意者。
35.根据本实施方式，处理部a(第1处理部)对声音信号si(第1声音信号)进行通过后级处理部a－2进行的周围声音强调处理(第1处理)而生成声音信号sg(第2声音信号)，并且将声音信号sg向混频总线34输出。另外，处理部c(第2处理部)对声音信号sa(第3声音信号)进行c处理(第2处理)而生成声音信号se(第4声音信号)，并且将声音信号se向混频总线34和第1输出目标(通信终端装置28或pc 29)输出。混频总线34至少将声音信号sg(第2声音信号)和声音信号se(第4声音信号)混合而生成声音信号sh(第5声音信号)，并且将声音信号sh向第2输出目标(耳机31或扬声器32)输出。因此，能够避免设备连接的复杂化，并且针对每个声音信号实施适当的处理而向适当的输出目标输出。例如，即使在从多个系统取得大量的声音信号的情况下，也不需要为了对各个声音信号实施适当的处理而连接大量的变换设备，避免连接变得复杂。
36.另外，声音信号si通过周围声音强调处理(第1处理)，并经过和信号sj、差信号sk的生成、及处理后和信号sl、处理后差信号sm的生成而变换为立体声的声音信号sg，因此能够容易地听到周围的声音。
37.另外，声音信号si是通过针对8通道的声音信号sc(第6声音信号)在前级处理部a－1实施双耳化处理(第3处理)，进行立体声化而生成的声音信号。因此，能够重现临场感。此外，根据该观点，声音信号sc只要是3通道以上的通道数的声音信号即可。此外，如果限定于谋求避免设备连接的复杂化并且针对每个声音信号实施适当的处理而向适当的输出目标输出这样的效果，则前级处理部a－1不是必须的。因此，声音信号si(第1声音信号)也可以是作为立体声信号而输入至声音信号处理装置100的声音信号。
38.另外，处理部b(第4处理部)对声音信号sb(第7声音信号)进行b处理(第4处理)而生成声音信号sf(第8声音信号)，并且将声音信号sf向混频总线34输出。混频总线34通过针对声音信号sg(第2声音信号)和声音信号se(第4声音信号)进一步混合声音信号sf(第8声
音信号)而生成声音信号sh(第5声音信号)。因此，能够将语音聊天(voice chat)语音等声音一起输出。此外，设置处理部b不是必须的。因此，声音信号sh(第5声音信号)也可以是不包含声音信号sf而将声音信号sg(第2声音信号)和声音信号se(第4声音信号)混合后的信号。
39.另外，声音信号sa(第3声音信号)是从传声器(26、27)输出的声音信号，因此能够将玩游戏的用户的声音等一起处理。此外，声音信号sa的取得源不限定于传声器。
40.另外，声音信号sc(第6声音信号)如果是从游戏装置30输出的声音信号，则能够将游戏声等一起处理。另外，声音信号sb(第7声音信号)例如如果是经由应用而输出的声音信号，则能够将语音聊天语音等声音一起处理。
41.另外，不经由混频总线34而输出的声音信号se的输出目标如果是通信终端装置28或pc 29等计算机，则能够向计算机输出实施了c处理的声音。另外，声音信号sh的输出目标如果是耳机31或扬声器32等音响输出设备，则能够将实施了a、b、c处理的声音混合而向音响输出设备输出。此外，耳机31是耳戴式的声音输出设备的一个例子，也可以是头戴式耳机。
42.以上，针对本发明基于其优选的实施方式进行了详细叙述，但本发明不限定于这些特定的实施方式，不脱离本发明的主旨的范围的各种方式也包含于本发明。
43.标号的说明
44.a、b、c处理部，si、sa、sg、se、sh声音信号，11cpu，28通信终端装置，29pc，31耳机，32扬声器，34混频总线。

技术特征：

1.一种声音信号处理方法，第1处理部对第1声音信号进行第1处理而生成第2声音信号，并且将所述第2声音信号向混频总线输出，第2处理部对第3声音信号进行第2处理而生成第4声音信号，并且将所述第4声音信号向所述混频总线和第1输出目标输出，所述混频总线将所述第2声音信号和所述第4声音信号混合而生成第5声音信号，并且将所述第5声音信号向第2输出目标输出。2.根据权利要求1所述的声音信号处理方法，其中，所述第1声音信号是立体声信号，所述第1处理部根据所述立体声信号而生成和信号及差信号，生成针对所述和信号进行了使中音域的声压减少的处理的处理后和信号，生成针对所述差信号进行了使规定频带的声压增加的处理的处理后差信号，通过将所述处理后和信号和所述处理后差信号变换为立体声信号而生成所述第2声音信号。3.根据权利要求1或2所述的声音信号处理方法，其中，所述第1声音信号是通过由第3处理部实施将3通道以上的通道数的第6声音信号进行立体声化的第3处理而生成的信号。4.根据权利要求1至3中任一项所述的声音信号处理方法，其中，第4处理部对第7声音信号进行第4处理而生成第8声音信号，并且将所述第8声音信号向所述混频总线输出，所述混频总线通过针对所述第2声音信号和所述第4声音信号进一步混合所述第8声音信号而生成所述第5声音信号。5.根据权利要求1至4中任一项所述的声音信号处理方法，其中，所述第3声音信号是从传声器输出的声音信号。6.根据权利要求3所述的声音信号处理方法，其中，所述第6声音信号是从游戏装置输出的声音信号。7.根据权利要求4所述的声音信号处理方法，其中，所述第7声音信号是经由应用而输出的声音信号。8.根据权利要求1至7中任一项所述的声音信号处理方法，其中，所述第1输出目标是计算机，所述第2输出目标是音响输出设备。9.一种声音信号处理装置，其具有：混频总线；第1处理部，其对第1声音信号进行第1处理而生成第2声音信号，并且将所述第2声音信号向所述混频总线输出；以及第2处理部，其对第3声音信号进行第2处理而生成第4声音信号，并且将所述第4声音信号向所述混频总线和第1输出目标输出，所述混频总线将所述第2声音信号和所述第4声音信号混合而生成第5声音信号，并且将所述第5声音信号向第2输出目标输出。
10.根据权利要求9所述的声音信号处理装置，其中，所述第1声音信号是立体声信号，所述第1处理部根据所述立体声信号而生成和信号及差信号，生成针对所述和信号进行了使中音域的声压减少的处理的处理后和信号，生成针对所述差信号进行了使规定频带的声压增加的处理的处理后差信号，通过将所述处理后和信号和所述处理后差信号变换为立体声信号而生成所述第2声音信号。11.根据权利要求9或10所述的声音信号处理装置，其中，所述第1声音信号是通过由第3处理部实施将3通道以上的通道数的第6声音信号进行立体声化的第3处理而生成的信号。12.根据权利要求9至11中任一项所述的声音信号处理装置，其中，还具有第4处理部，该第4处理部对第7声音信号进行第4处理而生成第8声音信号，并且将所述第8声音信号向所述混频总线输出，所述混频总线通过针对所述第2声音信号和所述第4声音信号进一步混合所述第8声音信号而生成所述第5声音信号。13.根据权利要求9至12中任一项所述的声音信号处理装置，其中，所述第3声音信号是从传声器输出的声音信号。14.根据权利要求11所述的声音信号处理装置，其中，所述第6声音信号是从游戏装置输出的声音信号。15.根据权利要求12所述的声音信号处理装置，其中，所述第7声音信号是经由应用而输出的声音信号。16.根据权利要求9至15中任一项所述的声音信号处理装置，其中，所述第1输出目标是计算机，所述第2输出目标是音响输出设备。

技术总结

本发明提供一种声音信号处理方法及声音信号处理装置，避免设备连接的复杂化，并且针对每个声音信号实施适当的处理而向适当的输出目标输出。处理部(A)通过对声音信号(Si)进行由后级处理部(A－2)进行的周围声音强调处理而生成声音信号(Sg)，并且将声音信号(Sg)向混频总线(34)输出，处理部(C)对声音信号(Sa)进行C处理而生成声音信号(Se)，并且将声音信号(Se)向混频总线(34)和第1输出目标(通信终端装置(28)或PC(29))输出，混频总线(34)将声音信号(Sg)和声音信号(Se)混合而生成声音信号(Sh)，并且将声音信号(Sh)向第2输出目标(耳机(31)或扬声器(32))输出。机(31)或扬声器(32))输出。机(31)或扬声器(32))输出。