问题表述 | 回答 | 优化建议 | 示例图片 |
视频素材中间存在剪辑,跳帧会有什么影响? | 生成的形象在同样位置会跳帧,训练导出demo时可手动选择,但需保证至少1min以上连续片段 | 视频只可进行掐头去尾式编辑,提供的素材需是连续无间断的拍摄片段 | |
视频素材有美颜美体造成抖动(脸部,腰部等)会有什么影响? | 生成的形象同样位置会抖动,训练导出demo时可手动选择,但需保证至少1min以上连续片段 | 视频如需美颜美体,建议检查处理过后的画面有无抖动 | |
视频素材中人物转头角度过大,大侧脸,仰头低头等会有什么影响? | 1. 导致训练人脸检测失败,实际被训练的视频时长可能小于3min,影响最终口型效果; 2. 大角度偏转前后口型效果明显差 | 建议人物头部不要有大幅转动,拍摄斜坐角度需要保证口型完整露出; | |
视频素材中手部或者其他物体遮挡了面部或下巴会有什么影响? | 1. 遮挡面部的,会导致训练提前结束,实际被训练的视频时长可能小于3min,影响最终口型效果; 2. 遮挡下巴的,训练后的形象,遮挡下巴的物体会有缺失(手部被口型覆盖) | 手部在做动作时不要进入头部区域;保证脸部全程无间断露出 | |
视频时长过短,不足3mins; 视频时长不足,重复拼凑时长; 视频重复读一段文字会有什么影响? | 口型丰富度不够,会明显影响口型的效果 | 建议视频录制满足时长3 - 5分钟 | |
镜头抖动会有什么影响? | 生成的形象同样可能发生抖动;需人工选取画面稳定的连续片段进行训练,若无连续一分钟以上镜头稳定片段则需重新录制; | 保证镜头固定足够稳定,拍摄全程无任何机位的变化 | |
衣服,椅子,桌面等附属物与绿幕同色系会有什么影响? | 1. 易造成分割效果不佳; 2. 去绿时,同色系附属物会受到影响产生颜色变化 | 避免穿偏绿色系衣物及使用偏绿色系道具 | |
人物、桌椅道具大面积反绿光怎么办? | 训练时需要进行较高等级的去绿可能使反绿的位置颜色失真;若不进行高等级的去绿可能造成产出的形象同样反绿光 | 优化拍摄环节 | |
眼镜片反光,透绿怎么办? | 眼镜片绿色的部分会被分割当成背景 | 拍摄时适当调整,尽量避免眼镜片透绿 | |
如何减少绿光的反射到人身上? | 1. 绿幕选择牛津布材质,背光安装,保证绿幕后方没有光线渗入; 2. 模特距离绿幕至少1.5米距离; 3. 对模特进行四面环绕打光,打掉轮廓上的绿光; 4. 绿幕和模特分开打光; 5. 可以把周围绿幕用黑布遮挡掉,只露出需要扣像的一块来减少漫射的光线 | | |
视频有多人声说话会有什么影响? | 对口型识别造成干扰,影响口型合成的效果 | 尽量保证环境安静;若无法满足,可调试麦克收音范围减小其他人声录入或进行音频后期处理 | |
使用蓝幕录制会有什么影响? | 身上反蓝光无法去除;需自行抠图去蓝光之后给到处理后素材和通道文件,可正常制作 | 提前准备绿幕避免使用蓝幕录制; | |
眼神不正视镜头,飘忽不定会有什么影响? | 生产的形象眼神同样会飘忽不定 | 建议录制全程眼神正视镜头 | |
开头未静默3s会有什么影响? | 1. 可能造成生产的形象静默时嘴巴不闭合; 2. 训练时可以通过手动选取说话间的闭嘴帧作为静默帧,但可能有不自然的情况 | 建议开头静默1-3秒,口型保持闭合状态 | |
发缝和碎发明显会有什么影响? | 1. 头发主体区域之外的碎发在分割过程中会直接消失; 2. 发缝可能会造成外侧头发消失或闪动,也可能发缝分割不佳; | 录制前整理头发,确保头发不会有发缝透出绿幕,尽量减少碎发 | |
佩戴耳饰会有什么影响? | 1. 画面中耳饰周围是绿幕时,分割后耳饰可能消失或闪动; 2. 耳饰周围是头发时,无影响,可正常分割 | 尽量不带耳饰,如佩戴耳饰,画面中耳饰需在头发范围内 | |
佩戴金属饰品,纽扣,手表,项链等会有什么影响? | 1. 易造成反绿,去绿后可能造成颜色变化或闪动; 2. 项链过粗或位于头部范围可能导致人脸识别失败 | 尽量不佩戴金属饰品,如佩戴需减少饰品的反绿程度 | |
胳膊下方封闭处细小缝隙,腿部封闭缝隙会有什么影响? | 在缝隙过暗的情况或极细小的粘连缝隙的情况下可能分割不佳; | 拍摄时适当调整,增大或不漏出缝隙; | |
动作超出画面外会有什么影响? | 生成的形象做相同动作时画面外的部位消失;训练时需人工选取动作不出框连续片段 | 在画面内动作,尽量不超出画面 | |
人物复用性差的特定动作比较多(如,比数字123等)会有什么影响? | 产出的形象随机动作播放时,这类动作和文本内容不匹配造成不自然 | 做动作时尽量做通用类型的动作 | |
视频底噪大会有什么影响? | 可能影响口型合成效果 | 建议采用麦克风进行录制;可以降低录制音量,相应的提高说话声音 | |
使用桌子录制坐姿时需要注意什么? | 需注意桌子无反绿情况出现;桌子稳定无晃动 | | |
是否可以录制侧身? | 需要面部五官和口型全程完整露出,侧身幅度不要过大; | | |
是否录制形象的时候一定要收音? | 一定需要,且保证音画同步。算法训练口型需要画面和声音构成一组pair一起进入模型,因此需要画面对应的音频 | | |
补光灯,或者其他物体出镜怎么办? | 1. 确保人物完整在绿幕中; 2. 其他不需要出现的物体跟人体在画面中无重叠交叉(有明显间距) | | |
读错文本怎么办? | 1. 视频素材录制过程中的读错字可以忽略 2. 声音录制过程中的读错字可以停顿两秒后将该句话再读一遍 | | |
是否可以使用客户自己准备的文本? | 可以,且推荐客户读和所生产内容相符合类型的文本 | | |
问题表述 | 回答 | 优化建议 |
有混响和噪声会有什么影响? | 易造成声音训练后效果不好 | 1. 录制时选择回音小、隔音好的房间(如卧室); 2. 采用麦克风录音,通过麦克风设置减少噪音收入; 3. 通过后期修音处理降低混响和噪声来提升demo效果 |
普通话不标准会有什么影响? | 声音训练后,发音可能会奇怪 | 建议使用发音标准、吐字清晰的普通话 |
ASR 分句不足50句会有什么影响? | 整体录音时长短,导致句子少的,会严重影响声音效果,需要补充录制; | 按照声音录制指引进行录制,满足100分句,10分钟以上 |
音频振幅过大(爆音)会有什么影响? | 声音训练后的发音也有同样问题 | 可以调试录制设备来改善录音效果,或提供后期修音后的素材 |
音频口水音,换气声明显会有什么影响? | 声音训练后的发音也有同样问题 | 录制过程中需注意避免,或提供后期修音后素材 |
音频录制的场地如何选择? | 建议在较多软质材料的安静场所录制,如卧室,车内等 | |
本页内容是否解决了您的问题?