MergeVideoModelFace_视觉智能开放平台-视频生产_API文档

功能描述

在获得用户授权的前提下，视频人脸融合可以精准地定位视频中的人脸，将用户上传的目标人脸照片与另一个人的人脸形象进行面部融合，达到换脸的感官效果。 模板视频人脸融合是基于用户预先上传创建的模版，通过输入一张待融合人脸图像，将图像人脸融合进指定的模板视频中。使用该方式需要提前创建好模板视频（AddFaceVideoTemplate），其处理效率高于通用视频人脸融合方式。 适用场景：

• 有固定数量的模板视频进行融合的场景。
• 同时支持视频中有一张脸和多张脸的场景，支持选脸和多脸融合。

为保证生成内容的安全合法，请勿使用公众人物或涉及敏感信息的图像或视频进行融合，同时，本服务也会在合成结果的左下角处添加Generated by AI的水印内容，效果如下图所示。

• 阿里云视觉智能开放平台视觉 AI 能力 API 接入、接口使用或问题咨询等，请通过钉钉群（23109592）加入阿里云视觉智能开放平台咨询群联系我们。

应用场景

• 影视后期制作：在影视后期制作时，因为某些原因需要替换演员，通过视频人脸融合技术，可利用前期拍摄素材进行处理，让前期视频素材中的人物看起来是新的演员在表演，可以为制片方节省大量的重新拍摄成本。
• 娱乐性短视频制作：用户可以将自己的人脸和已获授权的合法视频中的人物人脸进行融合，生成趣味性视频。
• 虚拟试衣制作：在婚纱摄影、民族服饰、汉服、仿妆等试衣场景，通过视频人脸融合技术进行服饰虚拟试穿。
• 电商数字人直播：在电商卖货带货直播场景，通过网红脸 ID 换脸实现数字人直播带货、虚拟人换脸。

特色优势

• 高保真、低违和效果：融合后的人脸保留了替换者人脸身份信息的视觉特征，而融入被替换者人脸中又无违和感，融合效果自然。
• 表情肤色一致性：融合后的人脸最大限度保留被替换者的面目表情、肤色一致性。
• 支持复杂人脸角度：支持模板人脸偏侧一定角度，融合后的结果真实稳定。
• 支持多人脸指定换脸：支持视频中含有多张人脸，并指定每个脸与不同的用户脸进行融合，可应用在全家福、婚纱摄影、多人角色创作等多人互动场景。

接入指引

1. 注册阿里云账号：打开阿里云官网，在阿里云官网右上角，单击立即注册，按照操作提示完成账号注册。
2. 开通能力：请确保您已开通视频生产服务，若未开通服务请立即开通。本能力仅限企业认证用户开通。实名认证操作方法请参见实名认证。

3. 创建 AccessKey：请确保您已创建 AccessKey，如果您使用的是子账号 AccessKey，您需要给子账号赋予 AliyunVIAPIFullAccess 权限，具体操作，请参见 RAM 授权。
4. 在线调试（可选）：您可以通过OpenAPI Explorer在线调试能力，查看完整的调用示例代码及 SDK 依赖信息，也可以下载完整的工程。
5. 前提条件：先通过视频人脸融合模板增加接口（AddFaceVideoTemplate）添加视频模板获取模板 ID（TemplateId），再使用已上传视频对应的模板 ID 和待融合人脸图像进行请求。
6. 开发接入步骤：

• 在 SDK 总览中选择您要接入使用的 SDK 语言。
• 在对应语言的 SDK 文档中找到 AI 类目为视频生产（videoenhan）类目的 SDK 包进行安装。
• 参考文档中提供的示例代码进行适当修改后调用。

7. 示例代码：该能力常用语言的示例代码，请参见模板视频人脸融合示例代码。
8. 客户端直接调用：该能力常用的客户端调用方式包括以下几种。

• Web 前端直接调用
• 小程序场景下直接调用
• Android 端直接调用
• iOS 端直接调用

输入限制

• 图像格式：JPEG、JPG、PNG。
• 图像分辨率：大于等于 128×128 像素，小于等于 4000×4000 像素。
• 图像大小：不大于 20 MB。
• URL 地址不能包含中文字符。

入参说明

MergeInfos 指融合参数，模板视频的人脸信息及待融合的用户人脸图片（TemplateId 为多人脸时不可为空）。

• MergeInfos 仅为多人视频场景时使用，需确保用户添加模板时 VideoScene 参数传入了multi值，其中传入的 TemplateFaceID 需要与添加模版时返回的 FaceInfos 里的 TemplateFaceID 一一对应。
• 同时传入 FaceImageURL 和 MergeInfos，以 TemplateId 为单/多人脸为准，过滤另一个入参。

图像质量建议

• 要求保证图像中的人脸清晰。图像中人脸尺寸建议大于 64×64 像素，人脸区域建议不大于全图区域的 2/3。
• 建议图像中人脸五官区域轮廓完整，无明显遮挡。人脸融合算法支持人脸偏侧一定角度，在偏侧角度不超过 30 度的情况下能取得更佳效果。
• 对于多人脸视频场景，系统会自动识别出整个视频中的不同人物 ID，建议视频中的人物不要出现角度过大的转动以及明显遮挡的情况，否则识别出的人物 ID 个数可能不准确。

推荐图像示例：

不推荐图像示例：

调用步骤

该能力为异步能力，需分两步进行调用。 第一步调用 MergeVideoModelFace 接口提交任务，请求成功后，得到一个任务 ID。 第二步调用 GetAsyncJobResult 接口查询结果，根据任务 ID 查询任务执行状态和结果。如果任务还在处理中，可稍等一段时间后再进行查询。

计费说明

关于模板视频人脸融合的计费方式及报价，请参见计费介绍。