注意:说明:
一、智能擦除功能简介
| 智能擦除支持能力 | | 功能描述 |
| 智能擦除-大模型至尊版 | | 基于自研视觉大模型,能够自动识别并擦除视频全屏中的二次加工痕迹,包括文字、Logo、台标、二维码、贴图等。结合生成式能力,无痕复原效果卓越,能够有效应对复杂纹理和动态效果的干扰。 |
| 去字幕 | | 去除视频画面中的文字字幕。无痕效果。 |
| 去 Logo | 基础版 | 基础版去 Logo 功能。模糊效果。 |
| | 高级版 | 高级版去 Logo 功能。无痕效果。 |
| OCR 提取字幕 | 仅提取 | 基于 OCR 文字识别,提取视频画面中的字幕内容,生成字幕文件。 |
| | 提取+翻译 | 提取原文字幕并翻译,生成翻译语言字幕文件。 |
| | 提取+翻译+压制 | 提取原文字幕并翻译,生成翻译语言字幕并将字幕压制到视频画面中。 |
| AI 配音 | 标准音色 | 输入视频和翻译语言字幕文件,生成翻译语言配音,并替换视频原声,适用于视频转译等场景。标准音色,暂仅支持中、英、日三语。 |
| | 克隆音色 | 克隆音色,基于领先 AI 语音克隆技术,逼真还原声音特征,支持几十种语种。 |
| 隐私保护处理(人脸、车牌) | | 识别视频画面中出现的人脸、车牌,并进行模糊或马赛克处理,有效保护隐私信息。 |
二、免费体验
打开 体验馆,进入智能擦除体验页,在右侧选择文件、擦除类型,单击开始处理。等待处理完成后即可查看结果。
注意:说明:
注意:体验馆功能较简单,仅用于体验基础效果,测试完整效果请参考这篇档说明使用控制台&API 接入。
三、接入前置操作
在接入智能擦除前,为正常使用 MPS 产品,你需要完成以下前置操作:腾讯云账号注册&登录、开通 MPS 产品、授权服务角色。
具体指引请参考 快速入门。账号授权问题可参考 账号授权 文档。
四、接入步骤一:配置模板参数
进入控制台智能擦除模板页面,参数说明可参考 智能擦除模板。为方便理解,下文分功能和应用场景给出了模板配置示例。
六、计费说明
基于自研视觉大模型,能够自动识别并擦除视频全屏中的二次加工痕迹,包括文字、Logo、台标、二维码、贴图等。结合生成式能力,无痕复原效果卓越,能够有效应对复杂纹理和动态效果的干扰。定价请参考 智能擦除计费说明。
七、模板
使用智能擦除大模型至尊版,由于擦除区域自动识别,无需自定义模板,使用 303 号预设模板即可。
根据 下文步骤二指引,发起任务时指定模板 ID 为 303,即可发起智能擦除大模型至尊版任务。
九、计费说明
使用去字幕功能,含自动识别擦除、指定区域擦除、漏擦区域二次处理,不区分“区域版”、“标准版”模型,均收取“去字幕”费用,定价请参考 智能擦除计费说明。
十、模板配置场景1:自动识别擦除(默认参数)
使用模板默认参数,如下截图所示,系统会通过 AI 模型识别视频画面中部靠下部位的字幕文本内容并进行无痕化擦除,生成新的视频。
该默认参数比较适合字幕样式标准规范,且背景干扰较少的视频:
十一、模板配置场景2:调整自动擦除区域,保护无需擦除的视频区域,减少误擦问题
在「自动识别擦除」方式下,系统会基于 OCR 文字识别,自动识别整个视频画面中存在的文字区域,并对处于「自动擦除区域」范围内的文字进行擦除处理。
若你的视频类似下方示例,画面中部靠下部分有其他无需擦除的文字内容,你可以通过配置「自动擦除区域」来减少误擦问题。
处理效果示例:
左:原始视频(底部“不顾一切爱上你”无需擦除)。中:使用「自动擦除区域」指定字幕位置的擦除效果。右:未指定「自动擦除区域」的擦除效果。
十二、模板配置场景3:字幕位置较固定,直接指定擦除区域,减少漏擦问题
擦除方式选择「自动识别擦除」,通常能自动识别出较准确的字幕位置,但在某些特殊情况下可能会出现漏擦问题,例如下情况:
红框部分字幕和背景对比度过小
因此,若你的字幕位置较固定,建议你选择「指定区域擦除」方式,框选出需要擦除的区域位置,最大程度减少漏擦的情况。
处理效果示例:
左:原始视频。中:绿框表示指定的「目标擦除区域」。右:擦除效果。
十三、模板配置场景4:字幕样式特殊(有背景阴影、花体、动效等),使用「强力擦除/擦除」所有模型
去字幕提供两种模型版本,适用于不同的字幕样式:
·标准擦除(推荐):通常建议选择该版本,适用于字幕样式标准的视频,无痕化效果更好,细节还原更优。
左:原始视频。中:「强力擦除/擦除所有」处理效果。右:标准擦除处理效果。若你视频中的字幕样式类似该示例,请选择标准擦除。
·强力擦除/擦除所有:适用于特殊样式字幕(如背景阴影、花体、动效),擦除面积更大,但无痕效果不如标准擦除。
左:原始视频。中:绿框表示指定的目标擦除区域。右:使用「强力擦除/擦除所有」去字幕模型的擦除效果
建议在「指定区域擦除」方式下使用「强力擦除/擦除所有」模型。
十四、模板配置场景5:在自动擦除基础上,添加额外擦除区域
开启后,可以添加矩形框,系统将在自动擦除的基础上,额外擦除目标区域。该功能主要用于指定较固定的待擦除文字区域,用于减少漏擦问题。
以下示例中,在「自动擦除区域」(字幕位置)的基础上,额外新增两个「添加擦除区域」(左上角的警示文案和底部的剧名区域),以确保这些位置较固定的文案能被擦除。
十五、同时去字幕 + OCR 提取字幕
在去字幕的同时,支持基于 OCR 文本识别,提取出视频原文字幕,并进行翻译。
注意:说明:
注意:在擦除场景下,原始视频通常带有原文字幕,使用 OCR 提取字幕效果更好且更准确。因此,智能擦除功能仅集成了 OCR 能力。如果你希望通过 ASR 语音识别生成字幕文件,可以使用智能字幕功能,具体参考 智能字幕接入。
十六、计费说明
收取“去字幕”+“OCR 提取字幕”(未开启翻译字幕能力)费用,或“去字幕”+“OCR 提取字幕并翻译”(开启翻译字幕能力)费用。定价请参考 智能擦除计费说明。
十七、模板配置示例
在「自动擦除区域」中指定需提取和擦除的字幕位置,开启 OCR 提取字幕,翻译可根据需求开启。
效果示例:
左:原始视频,绿框为自定义「自动擦除区域」。右:擦除效果及提取出的字幕文件
十八、单独 OCR 提取字幕
不进行擦除,仅基于 OCR 文本识别,提取和翻译字幕。
十九、计费说明
若仅提取原文字幕,收取“OCR 提取字幕”费用;若开启了翻译字幕能力,收取“OCR 提取字幕并翻译”费用。定价请参考 智能擦除计费说明。
20、模板配置示例
目前单独 OCR 提取字幕功能,暂未支持控制台自定义配置,你可以使用 MPS “智能分析”功能下的25号模板,通过扩展参数发起。详细说明请参考 智能擦除接入(旧)- OCR 提取字幕。
21、字幕级译制(同时去字幕 + OCR 提取字幕 + 翻译字幕 + 字幕压制)
输入带有原语言字幕的视频,输出带有翻译语言字幕的视频(不含 AI 配音)。
左图:原始中文短视频;右图:处理后输出视频具有英文字幕。
注意:说明:
注意:若你希望单独使用字幕压制,可以使用音视频转码功能实现,详细请查看音视频转码接入-字幕压制、外挂字幕 指引。
22、计费说明
收取“去字幕”+“OCR 提取字幕并翻译+压制字幕”费用,定价请参考 智能擦除计费说明。
23、模板配置示例
目前该功能暂未支持控制台自定义配置,你可以使用 MPS “智能分析”功能下的25号模板,通过扩展参数发起。详细说明请参考 智能擦除接入(旧)。
24、配音级译制(同时去字幕 + OCR 提取字幕 + 翻译字幕 + 字幕压制 + AI 配音)
左:原视频中文字幕中文语音;右:处理后生成多语言字幕和语音;
配音级视频译制功能可以自动识别视频中的原始字幕,进行精准擦除和大模型翻译,并将翻译后的字幕无缝压制到视频中,同时提供自然流畅的 AI 配音,提升观赏体验。
25、模板配置示例
目前该功能暂未支持控制台自定义配置,你可以使用 MPS “智能分析”功能下的25号模板,通过扩展参数发起。详细说明请参考 配音级视频译制接入。
26、去 Logo
去 Logo 表示擦除视频画面中的 Logo、图标、用户头像等图形内容,支持基础版和高级版两种模式:
·基础版:基础模糊效果,性价比高,适合动画或背景较干净的视频。收取“智能擦除基础费用(去 Logo-基础版)”费用。
·高级版:擦除效果更好,适合短剧等现实风格视频。收取“去 Logo-高级版”费用。
左:原始视频,红框内为 Logo 位置。中:基础版处理效果。右:高级版处理效果
27、计费说明
收取“去Logo-基础版”或“去Logo-高级版”费用,定价请参考 智能擦除计费说明。
28、模板配置示例
去 Logo 支持「自动识别擦除」和「指定区域擦除」两种处理方式。
红框:不断移动的动态 Logo,建议使用自动擦除(非常见互联网 Logo 需进行模型训练)。绿框:位置固定的静态 Logo,使用指定区域擦除即可去除。
·对于常见互联网 Logo 或者已入 MPS 模型库的定制 Logo,可以使用「自动识别擦除」。
自动识别擦除:利用 AI 模型,自动识别视频全屏画面中的 Logo 并进行擦除,支持静态和位置变化的 Logo。
目前,我们支持十多种常见互联网 Logo,对于不在支持范围内的 Logo,我们也提供定制化训练服务,这将单独收取模型训练费用。
「自动擦除区域」选择「自动检测」,则默认会全屏识别水印。如果画面中存在无需擦除的水印,可以通过调整「自动擦除区域」来保护无需擦除的部分。
视频画面中心的“腾讯云” Logo 需要擦除,右上角的无需擦除,因此「自动擦除区域」仅框选了中心的 Logo 区域
效果示例:
左:原始视频;右:擦除效果
·对于位置固定的 Logo,可以使用「指定区域擦除」。
指定区域擦除:若画面存在干扰情况,自动擦除可能存在漏擦问题。因此,对于位置固定的静态 Logo,建议使用指定区域擦除,最大程度减少漏擦误擦问题。系统将直接擦除“目标擦除区域”,不会自动识别或擦除视频中其他位置的 Logo。
视频左上角存在用户头像,需要在「目标擦除区域」框选该位置
效果示例:
左:原始视频;右:擦除效果
30、计费说明
同时去字幕 + 去 Logo,收取“去 Logo-高级版”和“去字幕”费用,定价请参考 智能擦除计费说明。
31、模板配置示例
目前该功能暂未支持控制台自定义配置,你可以使用 MPS “智能分析”功能下的25号模板,通过扩展参数发起。详细说明请参考 智能擦除接入(旧)。
33、计费说明
使用隐私保护处理功能,收取“隐私保护处理(人脸、车牌)”费用,定价请参考 智能擦除计费说明。
34、模板配置示例
支持对人脸、车牌进行模糊或马赛克处理。模板配置处理目标、处理效果即可。
效果示例:
左图:原始视频画面;右图:人脸模糊处理
35、接入步骤二:发起任务
发起任务支持三种方式:控制台创建任务、API 发起任务和自动触发任务。具体说明参见下表:
| 发起方式 | 简要说明 | 简要操作描述 |
| 控制台创建任务 | 零代码。每次可手动选择单个视频发起任务,适用于测试阶段。 | 进入控制台创建任务页面,选择输入文件路径、配置处理流程和参数、指定输出路径,即可发起任务。 |
| API 发起任务 | 调用 API 接口发起任务,适用于与业务结合、批量处理。 | 调用 发起媒体处理 接口,配置输入文件路径、智能擦除模板 ID 或编排 ID、输出路径,即可发起任务。 |
| 自动触发任务 | 零代码。当指定 COS 路径下上传了新文件,按预设流程和参数自动发起任务,适用于批量自动化操作。 | 进入控制台编排管理页面,创建编排并启用自动触发。 |
36、控制台发起任务
1. 进入控制台 创建任务 页面,单击 创建离线文件处理任务。
2. 依次配置输入文件路径、任务处理流程、输出路径。
在任务处理流程中需要添加智能擦除节点,并选择智能擦除模板或自定义擦除参数。
3. 配置好后,单击 创建 按钮即可发起任务。
37、自动触发任务
1. 进入控制台 离线编排 页面,单击创建离线服务编排。
2. 在页面中配置好触发目录、输出目录、任务配置,即可创建编排。
3. 成功创建编排后,进入离线编排列表,启用该编排。后续在触发目录中上传需要处理的视频文件,将自动按照编排中的任务配置处理新上传的视频,无需手动在控制台创建任务。
注意:说明:
注意:编排启用后约3-5分钟即可生效自动触发。系统只对新上传至触发目录的视频文件生效,之前存放在触发目录中的文件不会被自动处理。
39、关联模板 ID
调用 ProcessMedia 接口 ,选择 SmartEraseTask 任务,将 Definition 设置为你需要的智能擦除模板 ID。ProcessMedia 的 JSON 示例如下:
{ "InputInfo":{ //输入视频路径,请替换为你的原始视频 "Type":"URL", "UrlInputInfo":{ "Url":"https://test-1234567.cos.ap-nanjing.myqcloud.com/mps_test/myvideo.mp4" } }, "OutputStorage":{ //输出COS存储桶,请替换 "Type":"COS", "CosOutputStorage":{ "Bucket":"test", "Region":"ap-nanjing" } }, "OutputDir":"/mps_test/output/",//输出文件夹路径,请替换 "SmartEraseTask":{ "Definition":00000 //智能擦除模板ID,请替换,00000为填写示例,不具备实际意义 }, "TaskNotifyConfig":{ //事件回调通知配置,可选 "NotifyType":"URL", "NotifyUrl":"http://www.qq.com/callback" }}
40、关联编排 ID
若你创建了编排,也可以调用 ProcessMedia 接口,将 ScheduleId 设置为你的编排 ID 发起任务。ProcessMedia 的 JSON 示例如下:
{ "InputInfo":{ //输入视频路径,请替换为你的原始视频 "Type":"URL", "UrlInputInfo":{ "Url":"https://test-1234567.cos.ap-nanjing.myqcloud.com/mps_test/myvideo.mp4" } }, "OutputStorage":{ //输出COS存储桶,请替换 "Type":"COS", "CosOutputStorage":{ "Bucket":"test", "Region":"ap-nanjing" } }, "OutputDir":"/mps_test/output/",//输出文件夹路径,请替换 "ScheduleId": 12345, //替换为自定义编排ID,12345为填写示例,不具备实际意义 "TaskNotifyConfig":{ //事件回调通知配置,可选 "NotifyType":"URL", "NotifyUrl":"http://www.qq.com/callback" }}