(来源:科技行者)
很长一段时间以来,人类一直在追求沉浸感的声音。
所谓沉浸感immersion,从字面意思很好解释:沉浸,即浸泡,浸入水中,多比喻完全处于某种境界或思想活动中,全神贯注于某种事物。
从古希腊时期开始,露天剧场就利用建筑设计,来增强声音的传播,让远处观众也能听到表演,以此营造沉浸感。而后到了19世纪,留声机的发明,让音乐可以被记录下来,并在不同的地方播放,这是一个重要的转折点,因为它打破了音乐体验的空间限制。但早期的留声机由于技术限制,音质并不理想,无法带来真正的沉浸感。
随后的几十年里,人类就一直在追求更高质量、更逼真、更无损的沉浸感声音。相对应的,听觉技术也从单声道,到立体声,到环绕声,呈现阶梯式递进。而每一次技术进步,都始于一个简单愿望:让人们能够更真实地体验这个世界。
到了现代,早在30年前,当导演斯皮尔伯格第一次听到dts剪辑过的音效时,几乎从椅子上跳了起来——“我惊呆了”,他回忆说,“传统配乐和dts之间来回切换,dts听起来是70毫米的六轨声音。”
要知道在当时,电影普遍用的环绕声音频,是记录在胶片齿轮缝隙中的,空间极为有限,可存储的数据量很小,随着放映次数的增多还容易磨损。而dts则采用cd光盘,单独存储6个声道的音轨数据,音质自然更好。
也正是那一年,斯皮尔伯格在电影《侏罗纪公园》里采用dts数码环绕声,影片中霸王龙令人毛骨悚然的咆哮声在影院环绕,让1993年的夏天格外科幻,也让dts这家公司正式进入公众视野。
《侏罗纪公园》的海报的dts标志,是最早出现dts的电影海报
dts公司成立时,全称为“digital theater systems”(数字影院系统),顾名思义,影院领域是dts最初立足的根本。后来,dts的含义变更为“dedicated to sound”,表示dts公司致力于更多与声音有关的技术。而现在,这一内涵再次演变为“dedicated to sensational”,这意味着dts正致力于所有能带来美妙体验的技术。
纵观当代的多声道音频技术格式,dts的最基本及普及的声道配置为5.1声道,其中“5”代表五个全频声道(前置左、中、右和环绕左、右),而“1”代表一个专门用于低频效果(lfe)的低音炮声道,这种配置为电影提供了环绕声体验。5.1声道带来的环绕声感受,让当时的电影沉浸感立马攀升。如今,尽管出现了更高级的多声道格式,如7.1声道、杜比全景声、dts:x等,5.1声道配置因其相对简单和成本效益,而继续保持着标志性地位。
dts三十年里程碑
今年,dts迎来30周年。dts品牌三十周年活动上海站12月8日举行,这是继今年9月的北京站之后的第二站,也是dts三十周年活动的收官之作。
在活动现场,一个有意思的体验来自「家庭娱乐体验区」,无线环绕声技术 dts play-fi与imax enhanced结合,能以无线方式,一键连接家庭的电视、扬声器、音箱、低音炮等设备。
现场工作人员介绍,dts play-fi具备“无线、无损、低延迟、多房间”的特点,兼容性极高,只要是产品支持dts play-fi,就可以通过wi-fi,自由连接不同品牌的影音产品。而imax enhanced是由dts与imax合力打造的影音授权及认证项目,具备惊艳画质、震撼音效、超大画幅的独特优势,索尼、tcl、海信、小米、荣耀等都有获得imax enhanced认证的产品。
此外还有dts:x ultra、dts headphone:x和dts soundunbound,是dts专门针对电脑、移动设备和游戏体验而打造的凯发k8官网的解决方案,致力于精准还原音源方位,全方位增强游戏环境音效感知,打造沉浸式的游戏音频体验。在现场的「电竞体验区」,惠普暗夜精灵9游戏笔记本、飞利浦tag4106游戏耳机、hyperx cloud iii飓风3游戏耳机、红魔dao tws氘锋全场景电竞旗舰耳机、以及罗技yeti麦克风齐上阵,吸引电竞爱好者围观。
在会议间隙,xperi公司(dts母公司)副总裁、大中华区总经理郎正武接受了包括科技行者在内的小规模采访,带来了公司战略核心、凯发k8官网的解决方案、生态合作等分享。
xperi公司(dts母公司)副总裁、大中华区总经理郎正武
专注四个赛道,从声音源头出发,玩出不一样的体验
问:dts目前的战略方向有哪些?
郎正武:今年是dts 30周年,母公司xperi现在专注于4个赛道:汽车、消费电子,stream(流媒体os战略平台,即operating system)、传统iptv。在这4个赛道里,dts的技术都有覆盖。
纯粹以dts自身战略来看,首先,会继续走消费电子的道路;其次,把汽车的体验做好、做完整;第三,家庭终端层面,在电视、游戏和电脑终端,继续与内容商合作,把内容做起来,包括dts play-fi流媒体平台。接下来,dts会更积极地跟上游合作,音乐平台、内容制作,更深入地跟创作者、导演、工作室在源头把内容做好、完善好。
同时,dts希望在影院端继续耕耘。因为影院带来的,是对声音的执着,还有多声道的技术创新。从源端出发,才能在终端玩出不一样的体验。
现在的电影行业,从全球市场来看都会趋于持稳,新兴市场对传统市场的影响很大,所以我们也在探索,怎样从ugc市场带入更好的体验进去。可能不一定是直接跟用户合作,可以从一些平台开始,比如b站、tiktok,平台通常会把大家的内容收集起来,做渲染、优化,是否可以在这样的过程中,把dts的技术植入进去,从而让用户在播放端有更好的体验。
问:dts跟车厂合作,仅仅只是软件合作,还是也包括芯片合作?
郎正武:dts一直都在尝试车载业务,持续运营了五六年,由于汽车业务开发周期通常较长,现在我们在洽谈的项目也要2年后才能看到成果,但现在大家也能看到有车厂推出dts音效。
dts与车厂的合作最主要是要软硬件同时加载。软件方面,类似于跟家庭影院的合作方式,比如先在高通或者nxp芯片上“跑”通了我们的技术,再跟车厂做软件上的配合,所以芯片和软件要一起做。
比如人脸识别,算法归算法,但它对camera(摄像头)的要求也很高。其实我们在做技术销售时,有一套reference design(参考设计),我们会跟客户说,建议用什么样的摄像头来捕捉车内状态,碰到一些暗光环境但仍要保持高精准度人脸识别,所以我们会跟车厂做硬件的搭配,但是我们不销售硬件,以纯软件销售为主。
在海外市场,dts与宝马两个月前做了两个类别的合作:一个是针对声音的体验,叫做dts autostage,纯粹是把声音和内容互动带进宝马车里;另一个是针对安全性的体验,叫做in-cabin monitoring system(座舱监控系统),它可以侦测驾驶状态,是把安全跟车内娱乐结合在一起。
我们是目前唯一一家软件公司,在汽车领域可以提供这两个同时配套的凯发k8官网的解决方案,这是一个令人兴奋的消息,我们相信有了宝马加持,很快会有其他车厂跟进。
问:dts与一些国内视频平台都有合作,如爱奇艺、腾讯、优酷等。未来咱们有可能与国内的音乐平台合作吗?比如qq音乐、网易云之类的。
郎正武:dts与qq音乐其实算是好老朋友,很早就有一系列的合作。现阶段不瞒您说,我们也有计划跟音乐流媒体平台合作,目前不太方便透露。
但最主要,还是希望能够从「端」去引进「多声道」的制作,可以有多个播放源,比如家庭、pc、手机,最终到车载,来打造一个新的多声道声音体验。
混音师好比是画家,dts给他们更多颜料
问:dts有没有跟音乐制作人合作的规划?
郎正武:dts与混音师一直有接触,他们好比是画家,dts给他们更多颜料,帮他们把画作创作得更丰富。
我们不会毫无头绪,相对会选择与有影响力的混音师合作,因为他们会把dts的技术带到业界,把电影混音、多声道混音技术普及地更好。
在国内,北京、上海大概有约10家后期制作室做了dts:x多声道混音的布置,所以合作比较稳定。
xperi大中华区市场总监daisy:国内比如中影等录音棚,都是dts的凯发k8官网的合作伙伴。今年票房前十的电影里,有八部都有dts:x,而且大都是中国的混影棚制作。
【编者按】dts:x技术是一种开放式的音频编码,同时也是基于声音对象的多维音频技术。与现有的环绕声系统不同,dts:x音频不再受到固定位置的扬声器布局或具体声道信号的束缚,它能根据回放环境的不同,进行灵活调试,从而获得在该环境下最佳的音质表现。
问:刚看到“dts沉浸式音频制作”场景,里面就一台笔记本、一个耳机、顶多再加一台pc,是否现在个人只要几台设备,就可以组成小型工作室,去进行音频制作?
郎正武:往年来看,沉浸式音频制作,都是以专业角度来看待的。近些年,每个人都可以是创作者,每个人对自媒体行业的兴起都有参与。我们希望能够打造一些工具,让更多人接触到「多声道制作」。
现在很多视频的制作,多以剪辑为主,可以做的各式各样;但音频的制作,还停留在人声加点背景音乐的做法。其实声音的东西很好玩,很能够让你的观众沉浸到你想表达的内容里去,绝对会加分。
像是你刚刚提到的“沉浸式音频制作”设备,如果说在传统混音室里,必须要有七八个音箱,整套设备对于普通内容创作者来说,难以接触到。我们希望,透过我们这样相对简约的设备,用耳机就能很好地监听、然后还原声音,不过在这之前还是有很高的教育市场成本。
“dts沉浸式音频制作”体验区现场
问:是否有可能是,不一定要收录基于对象的音频,可能只是多声道,然后通过技术把它做成一个基于对象的音频?
郎正武:我们有个技术,它可以抓取任何一段声音,声音里可能有多种元素,它可以从这个声音段里抓取一个特定的元素出来,专门做调整。这个技术以往叫做“人声补强”,做法是抓取这一段的音频频率,当把它提升时,可能其他所有的噪音杂音都同时被提升。
我们现在的做法是voice separation(人声分离)或source separation(声源分离),用ai算法把这段人声抠出来,像是抠图,但不影响其他的声段,抠出来之后能做什么,想象空间就可以很大,比如可以直接换一种语言;或是把声音调高调低,而不影响其他的观影活动;或是套用一些采样(sample),就能更容易做结合。
用一个技术,把内容串在一起
问:imax enhanced硬件方面的合作日趋成熟,那么内容合作方面有哪些进展?
郎正武:imax enhanced是dts在国内一个重要项目,我们获得很多厂商的支持,像tcl、海信、小米、飞利浦等。在内容端,我们目前在爱奇艺、腾讯、优酷等平台上有imax enhanced的内容专区。
imax enhanced目前的内容产出周期较长,由于受到疫情以及前阵子好莱坞罢工的影响,片源产出较少,所以目前主要是国内的内容库,但好在,近期国内在放宽海外影片的进口,所以接下来的内容库会增加。
问:dts play-fi的差异化优势是什么?
郎正武:在产业端,你今天选择dts的生态,用户可以买其他各家的音频产品,可以是三星的、lg的、海信的、tcl的,只要支持play-fi,都可以“串”在一起。再加上我们的迭代更新是跟着产业走,会保持开放沟通。如果你只是一家独唱,你自己也会受限。
在用户端,卖场自然也希望用户有多个选择,如果用户看准dts play-fi,他可以选择多家产品,这也是我们的一大优势。
问:关于商业影院,除了dts:x临境音影厅,为什么现在又推出新的surround cinema?
郎正武:我们当时在做dts:x时,不仅内容端要做全新创作,硬件端也必须要能支持高声道,所以在影院端要投入的成本也挺高。几年运营下来,我们发现有很大一部分影院无法加装天空声道,因此在现有的5.1声道环境下,怎么确保更好的音效?
于是我们推出了dts surround cinema,这是跟影院、行业讨论后推出的新产品,还是希望能够透过我们的调试,确保在没有天空声道的情况下,观影者可以体验更好的电影效果。