低光视频分析的端边协同联合编码和神经增强

摘要:在这篇论文中,我们研究了低光环境下的视频分析,并提出了一种端边协同的系统,其中包括联合视频编码和增强。它能够自适应地传输摄像机的低光视频,并在边缘执行增强和推理任务。首先,根据我们的观察,低光视频的编码和增强对推理精度有显著影响,这直接影响带宽和计算开销。其次,由于内置计算资源的限制,摄像机执行编码并将帧传输到边缘。边缘在推理之前对低光视频进行神经增强处理,以处理低对比度、细节损失和色彩失真问题。最后,在边缘设计了一个自适应控制器,用于选择量化参数和神经增强网络的尺度,以提高推理精度并满足延迟要求。大量实际实验证明,所提出的系统能够在通信和计算资源之间取得更好的平衡,并优化推理精度。

作者:Yuanyi He, Peng Yang, Tian Qin, Ning Zhang

论文ID:2308.16418

分类:Multimedia

分类简称:cs.MM

提交时间:2023-09-01

PDF 下载: 英文版 中文版pdf翻译中