ACM MM 2021: 基于光学成像的电影音频修复新工艺

时间:2022-02-18浏览:729

作者:王睿琦 等

历史影音资料是珍贵的文化与艺术研究宝库。历史影音资料的音频以时域信号的形式被记录在电影声带上。受技术条件限制,传统的基于扫描的声带还音工艺在处理有损声带时还存在着诸如还音效率低、修复质量不够理想等问题。同时,激光带来的热效应容易在胶片上造成物理损坏。有鉴于此,在张勤教授承担的国家自然科学基金重点项目“历史影音资料音频修复方法与关键技术研究”(项目编号:61631016)中,提出了一种基于光学成像的声带修复还音方法——MovieREP。该方法可以有效避免声带在还音过程中可能出现的物理损坏,并且可以在保证处理速度的前提下有效提高声带修复还音质量。具体来说,在MovieREP中,本团队设计了光学成像模块来进行声带信息的采集。该模块可以有效避免物理损坏问题,并且将音频采样率提高至电影行业标准的162.08%。接着,本团队设计了一个基于色彩矩阵和对称性优化的图像域处理方法来实现声带的修复及还音。实验证明,该方法相较于传统工艺在修复质量及还音速度上都有着明显的提升。最后,本团队使用光学成像系统建立了一个声带数据集——MovieAD。视频中对上述工作进行了展示。