智能视频

智能视频结合信号处理理论和深度学习,增强媒体视觉效果。利用多模态技术,有效实现视频分析、自动云剪辑、智能封面、横屏转竖等功能。

智能转码

对输入的视频进行智能分析后,采用合适该视频的各种提升主观质量的智能算法,最后得到提升了质量,优化了码率的视频。

可以提供的能力包括但不限于 SDR2HDR、AI 帧率上采样、分辨率上采样、细节增强、色彩增强等等。

参考场景

  • 博物馆 / 档案馆 / 资料馆
    提升影像质量,适应更多高清设备
  • 景区 / 园区大屏
    画质细节更加丰富

视频插帧

基于AI深度学习模型并利用光流估计、通道注意力机制,实现流畅、清晰的视频插帧效果。插帧在两帧图像中生成一帧新的图像,达到提升时间流畅度和稳定性的作用。

原视频
处理后

参考场景

  • 适用低帧率视频的现代化适配
  • 广电 / 流媒体平台
    老片翻新、影片适配新设备

超分辨率

视频超分辨率可在增大视频分辨率的同时进行主观画质提升,使用AI算法(GPU),对视频的分辨率进行上转换(如2K->4K,4K->8K)。支持 4K、8K等,在原始视频无法满足 4K、8K 等高分辨率设备的情况,扩大视频设备适应范围。

参考场景

  • 博物馆 / 档案馆 / 资料馆
    提升影像质量,适应更多高清设备
  • 景区 / 园区大屏
    画质细节更加丰富

智能加清

综合人脸检测、文字检测、细节纹理增强、色彩增强等多种视频/图片处理模块,对视频/图片进行智能加清,进行相应的画质修复和提升,对比传统加清效果更明显、细节更丰富,处理时间短。

原视频
处理后

参考场景

  • 博物馆 / 档案馆 / 资料馆
    提升影像质量,适应更多高清设备
  • 景区 / 园区大屏
    画质细节更加丰富
  • 老照片修复、封面图片增强
    画质提升后的封面能够明显提升点击量

夜景增强

主要解决夜晚拍摄光线不足的问题,提升亮度和物体细节,将拍摄硬件成本转移至软件。

原视频
处理后

参考场景

  • 提供夜游项目的园区
    园区拍摄夜景宣传片时无需高昂的拍摄设备

细节增强(锐化)

对因为分辨率或硬件等原因引入的画面清晰度不够的问题,利用细节增强能提升细节丰富度,提升轮廓清晰度。

原图
处理后

参考场景

  • 适用于所有视频
    提升主观画质

智能去压缩失真(去块效应)

通过AI模型学习视频压缩生成的块效应、振铃效应等影响主观质量的转换过程,从而达到修复视频质量的目的。

原图
处理后

参考场景

  • 对较低质量或多次转码视频进行画质修复和提升

去抖动

视频去抖动服务主要针对手持、骑行等拍摄环境不稳定导致的抖动问题,弥补拍摄硬件的不足,提升视频质量。

原视频
处理后

参考场景

  • 户外运动拍摄

视频去噪

视频去噪服务通过去除视频噪点提升视频画质。

原视频
处理后

参考场景

  • 老电影修复
    从严重噪声中恢复微弱视频信号,提升电影画质
  • 提供夜游项目的园区
    园区拍摄夜景宣传片时无需高昂的拍摄设备

视频去划痕雪花

视频去划痕雪花通过深度学习模型,将视频中存在的划痕、雪花等影响主观质量的问题进行修复,提升视频质量。

原视频
处理后

参考场景

  • 广电 / 博物馆 / 电影 / 视频平台
    老片翻新

老片修复

老片修复通过智能的视频分析,针对每个视频检测不同的损坏类型和需要增强的类型,综合去划痕、去雪花、去噪、超分等多种视频处理能力,选择最佳的修复和增强处理,将老电影、老资料片进行修复。智能修复一部影片只需要十小时,相比于人工以周计的时间具有较强优势。

参考场景

  • 博物馆保存大量历史影像资料,因陈旧保存等问题有很多噪点、划痕、不清晰等问题,通过修复更加适合当前大屏播放场景,让经典电影重映。

横屏转竖

输入横屏视频,通过检测视频画面的显著性区域,结合指定宽高比对视频画面进行裁剪,输出对应的竖屏视频,该能力可以使视频在不同比例的设备中都能够呈现最优观看效果,主要应用在横屏转竖屏,增加移动端内容分发。

参考场景

  • 广告营销
    一键生成竖屏广告,提升移动端触达率
  • 官方活动宣发
    提升手机端宣发触达率
  • 游客互动小程序
    帮助游客获得竖屏内容,增加游客自发宣传

智能拆条

识别和分析视频中动作、事件、人脸等特性,自动定位精彩片段,完成拆条、剪辑、配乐等工作,生成精彩视频集锦并自动选择封面或gif封面。

智能集锦

识别和分析视频中动作、事件、人脸等特性,自动定位精彩片段,完成拆条、剪辑、配乐等工作,生成精彩视频集锦(通用视频vlog剪辑、足球、花样滑冰、跳水、影视剧、王者荣耀、绝地求生、使命召唤,支持定制)。

参考场景

  • 目前已支持例如庆余年、足球、王者荣耀等影视、体育、游戏场景下,同时支持通用场景的智能封面和gif封面。

智能封面

识别和分析视频中动作、事件、人脸等特性,自动定位精彩片段,完成拆条、剪辑、配乐等工作,生成精彩视频集锦并自动选择封面或gif封面。

参考场景

  • 论坛 / 峰会 / 博览会
    为官网视频回放自动生成封面图
  • 智慧景区 / 智慧园区 / 游乐园
    园区/游乐项目精彩视频集锦,供大屏/官网回放
  • 影视综宣发
    快速剪辑影视剧片花进行宣发,官方CP向剪辑
  • 体育 / 游戏
    快速剪辑比赛精彩瞬间,为比赛回放提供素材

视频去重

提取视频帧的视觉信息,将视频编码成一个向量。通过比对两个视频的编码向量,可以快速得到两个视频的相似度。主要应用在视频查重场景,可以对抗缩放、翻转、噪声、字幕边框等常见攻击手段。

参考场景

  • 内容平台
    快速检索平台中的重复视频
  • 版权保护
    自动判断视频是否侵权

绿幕替换

将背景绿幕进行替换,自研算法可弱化绿幕边缘,背景替换更加自然。

参考场景

  • 短视频玩法
    背景替换短视频新玩法
  • 文物拍摄
    将拍摄的文物替换到风景画中

水印检测

对图片或者视频中的特征厂商的水印进行检测,依托高性能的深度模型输出的水印位置和类型信息供业务方参考。

参考场景

  • 视频审核
    对平台中包含水印的视频进行检测并过滤以免引发侵权风险
  • 视频推荐
    对平台中包含水印的视频进行去除增加推荐高质量视频的策略

视频标签

对 UGC 短视频在特定标签体系下自动打标签,在内容语义方面生成短视频的标签描述,可以作为视频推荐和视频检测等场景的高层语义参考,辅助下游依赖视频内容语义的任务。

参考场景

  • 视频分类
    UGC 视频自动打标签
  • 文本标签
    视频标题和视频画面文字
需要观看演示或者获取文档?
腾讯多媒体实验室
/
我们希望使用性能和分析 cookies(“Cookie”)来帮助我们识别您是否是回访者并跟踪网站浏览次数和访问次数。有关我们使用的 Cookie 和您的选项(包括如何更改您的偏好)的更多信息,请参阅我们的 Cookies 策略.