会员登录 立即注册

搜索

剪映数字人口播原理

[复制链接]
崎山小鹿 发表于 2024-7-3 21:22:34 | 显示全部楼层 |阅读模式
崎山小鹿
2024-7-3 21:22:34 4428 2 看全部
剪映版本升级了,新版本6.0.1支持数字人定制,于是我赶紧申请了使用资格
微信截图_20240702200113.png

目前的价格是49元创建一个数字人形象,能使用30天,30天之后要重新续费。
微信截图_20240703210617.png

支付49元之后剪映要求上传2.5至10分钟的视频
微信截图_20240703093744.png

接着要阅读一段话并录制视频上传
微信截图_20240703125157.png

第三步提交
微信截图_20240704115252.png

提交完成之后大概一个小时就会有一个特定数字人形象出现:
微信截图_20240703211258.png

发现在使用这个数字人时还额外的需要消耗积分,而我的积分为0,需要注册会员获取积分,就购买了一个19元包月的会员,终于可以正常使用了。

因为第一次定制数字人踩了不少坑。

1.上传的视频中每一帧都要有人物画面,像人物入场或者起身离场的画面都不能有。如果有这样的画面要用视频编辑软件剪掉。

2.录视频时眼睛平视摄像头,你以为他会自动纠正你的眼睛,滚犊子。

3.尽量露出完整的上半身轮廓,不要出现缺胳膊的情况。

4.嘴巴在任何时候都不能遮挡,如果要手扶眼镜要避开手拂过嘴巴的情况。
微信截图_20240703213558.png


推测剪映数字人的原理是:得到你的视频素材之后提取你的嘴型与音频的对应关系,在生成数字人的时候重新播放你的原始素材再根据当前的语音音频提取对应的嘴型,将新的嘴型覆盖原始素材嘴型,即完成数字人口播视频的生成。那么这里用到了嘴型识别技术和换嘴技术。相比3D数字人嘴型驱动方式这种对服务器的压力小太多,使用的嘴型都是原始素材中直接提取,所以生成的画面也非常逼真。

下面是我花了68元做的数字人效果。

天不生墨翟,万古如长夜!以墨运商,以商助墨。金双石科技长期招聘科技研发人才!微信:qishanxiaolu   电话:15876572365   公司:深圳市金双石科技有限公司
回复

使用道具 举报

 楼主| 崎山小鹿 发表于 2024-7-3 22:39:12 | 显示全部楼层
崎山小鹿
2024-7-3 22:39:12 看全部
即使是字节跳动这样的公司做产品也是非常谨慎和保守的,以最少的投入获取最大的回报,能把数字人定制打到两位数以下也没别人了。
天不生墨翟,万古如长夜!以墨运商,以商助墨。金双石科技长期招聘科技研发人才!微信:qishanxiaolu   电话:15876572365   公司:深圳市金双石科技有限公司
回复

使用道具 举报

 楼主| 崎山小鹿 发表于 2024-7-3 22:41:48 | 显示全部楼层
崎山小鹿
2024-7-3 22:41:48 看全部
崎山小鹿 发表于 2024-7-3 22:39
即使是字节跳动这样的公司做产品也是非常谨慎和保守的,以最少的投入获取最大的回报,能把数字人定制打到两 ...

换脸技术都比字节数字人技术高一个等级,更别说3d数字人嘴型和表情驱动了。
天不生墨翟,万古如长夜!以墨运商,以商助墨。金双石科技长期招聘科技研发人才!微信:qishanxiaolu   电话:15876572365   公司:深圳市金双石科技有限公司
回复

使用道具 举报

  • 您可能感兴趣
您需要登录后才可以回帖 登录 | 立即注册 |

本版积分规则 返回列表

管理员给TA私信
以墨运商,以商助墨。

查看:4428 | 回复:2

  • 在村子中央建立图书馆

    昨天成绩斐然,收获两栋漂亮海滨别墅,和一个高级瞭望塔,但同时损失惨重,村民损失九

    阅读:0|2024-12-22
  • 墨家小镇文化与经济

    文化建设: 墨家十要 旗帜: 八卦 双鱼戏水 经济建设: 麦田、 甘蔗田

    阅读:156|2024-12-20
  • 墨者的面具

    仿照三星堆的面具做头像

    阅读:151|2024-12-19
  • 从出生地前往墨家小镇集合

    装饰一下出生地 现在有路标了,通过路标让会员找到我们的村庄,一路要非常小心不

    阅读:239|2024-12-18
  • 墨家盾牌和武器

    盾牌上有墨家的标志,武器上也有墨家的特色

    阅读:231|2024-12-17
  • 安全的保险箱

    每个人都一个自己的箱子,只有自己能开启。且死亡不掉落! 对着一个上方没有红石导

    阅读:240|2024-12-17
  • 我的世界之墨家旗帜

    如何在我的世界里创建独特的旗帜呢? 将图片生成像素画 https://chuiliu.github.io/d

    阅读:295|2024-12-16
  • 给服务器增加组件

    给服务器增加组件,例如:墨家旗帜 租赁服务器如何使用mod? 答:目前我的世界纯净

    阅读:356|2024-12-15
  • 用手机玩墨山游侠

    用手机玩墨山游侠 各大应用市场都可以下载我的世界游戏,启动之后 选择【开始游戏】

    阅读:366|2024-12-15
  • 墨山游侠服务器开启

    在网易上开启创服之旅 服务器号:25744989 我们先用游戏版本:1.12.2 来测试,看

    阅读:478|2024-12-14
金双石科技,软件开发20年,技术行业领先,您的满意,就是我们的目标,认真负责,开拓进取,让成品物超所值
关于我们
公司简介
发展历程
联系我们
本站站务
友情链接
新手指南
内容审核
商家合作
广告合作
商家入驻
新闻合作

手机APP

官方微博

官方微信

联系电话:15876572365 地址:深圳市宝安区西乡街道宝民二路宝民花园 ( 粤ICP备2021100124号-1 ) 邮箱:qishanxiaolu@qq.com
QQ|Powered by Discuz! X3.5 © 2001-2024 Discuz! Team.
快速回复 返回顶部 返回列表