跳到正文
抖音 · 话题 #即梦AI· 即梦AI·· 17 小时前精选AI 评分75

即梦学院上线:Seedance 2.5 多模态参考教程拆解4个案例

多模态参考有多强?小白也能秒出电影级大片 即梦AI全新教程栏目《即梦学院》上线啦!即梦Seedance 2.5 多模态参考的坑,这期一次讲透。 参考素材越多,AI越容易翻车?真不全是它的锅,多半是参考没安排好。总结下来就三类问题:同类素材互相矛盾、没说清每张素材的用途、提示词里 @ 错了人。这期用4个案例,把踩坑点一个一个拆开,告诉你素材怎么分工、提示词怎么写,学会了就可以少走弯路。 最后三句口诀,记下来,50 个参考也不乱:图片管长相,视频管动作,音频管声线;角色一致靠多角度图,运镜动作靠参考视频,配音氛围靠音频;分工对了,AI 才不打架。 #即梦AI#即梦Seedance2点5#即梦学院#AI教程#AIGC

AI 导读

即梦AI上线教程栏目《即梦学院》,首期讲解即梦Seedance 2.5的多模态参考功能,最多可参考50个素材,包括30张图片、10段视频和10段音频。教程用4个案例拆解素材分工与提示词@写法,并给出“图片管长相、视频管动作、音频管声线”的口诀。

打开原文douyin.com
选题角度

官方教程用4个案例拆解即梦Seedance 2.5多模态参考的素材分工与@提示词写法,适合跟着案例复现同一组素材的生成效果。

博主
即梦AI@28943154636

粉丝 0

认证:Dreamina官方账号

即梦AI,即刻造梦。 记录每个人的奇思妙想,帮助人们轻松表达、自由创作。 jimeng.jianying.com 产品体验反馈可以找@即梦官方客服

互动数据
点赞
38
评论
1
分享
2
收藏
20

约为这个来源平时的 6.3 倍

数字来自平台,为最近一次抓取时的数据。

正文

以下是视频口播的自动转写,可能有错字。

not here, not today to battle. 嗨,我是 aura。刚才这类大场面看着好像很难做,对吧?但其实这条片子我是使用即梦 c-dance 2.5的多模态参考,选择30秒,直接出片的。那为什么同样使用 c-dance 2.5,有的人生成电影镜头,有的人得到的却是会动的 ppt?

差别到底在哪里?先别急着堆满参考,这期我整理了4个实用案例,手把手带你走一遍 c-dance 2.5的多模态参考功能,就算是新手小白,看完也能生成大片。让我们开始吧!Sedans 2.5这一次不仅提升了参考数量,最多可参考50个素材,包括30张图片、10段视频,还有10段音频。

更让我惊喜的是,参考素材内容和生成结果的对应也更准确了。可以说是所参即所得。具体怎么用呢?往简单了说,就是想让它参考什么,就把对应的素材放进来,再在提示词的关键位置艾特它。图片能参考人物。服装、产品、场景和分镜等等,视频能参考动作、运镜和特效。

音频能参考声线、背景音乐,还有剪辑节奏。一下子说了这么多参考点,那如果放到实际创作中,又能解决哪些问题?今天我们将通过几个具体案例来拆解一下。第一个案例展现的是多图参考准确性的运用。以往在生成多人互动或群像场景的时候,一旦用了多图参考,就会出现“容脸乱飞”的情况。

我还以为你只是随口一说,我已经想了很久。这次不是开玩笑。多主体同框容易变成双胞胎,简直把 bug 叠满了。这是因为当我们上传多个参考时,模型容易在生成过程中混淆人物特征。哎?但现在提升了模型的理解能力,是不是可以更准确的对应参考角色?每个角色还能多艾特几张图,帮助模型记录人物特征啦。

立马试试,来看这段我一次过生成的奇幻喜剧,可以看到无论镜头怎么切,人物都没变。借我,不借。现在你不用找我借啦。看完案例,我们来拆解一下提示词。打开即梦AI,先按剧情顺序准备好所需要的素材。接着把角色身份、台词和音色逐个对应,再把场景按顺序标清楚。

这里我总共用到了18个素材,将人物、声线、场景都@上了。这里分享一个小诀窍,我不仅为每个角色准备了详细的角色三视图,还准备了特定场景的剧照图,来模拟实际拍摄的光影和颜色。这样生成出来的人物就没有贴图感,更加贴近真实拍摄的质感,也能让模型更加理解角色细节,镜头切换也更容易保持人物的一致性。

最绝的是,我还使用了一段参考视频,专门参考这种物体表面剥落、积木碎片洒落一地的创意视觉。最后生成出来的效果非常接近参考视频,同时人物也保持住了。除了参考单个特效视频,我还探索了其他玩法。结果我发现现在多模态参考竟然还能够直接处理绿幕素材了,只要在输入框中引用多个绿幕素材,就能直接合成一个完整的短片。

看,这就是我刚刚用输入的绿幕素材合成的效果了。光影、发丝都融合的很自然吧?只要善用多模态参考,就算从来没有学过 cg,也能做出媲美专业特效的感觉。那如果说我们想做运镜更复杂、运动更连贯、更准确的镜头设计,又该怎么办呢?悄悄告诉你,不用再逐帧干分镜啦!

我已经替大家试过了,多模态参考可以直接参考你的多宫格故事板,生成精准对标的连贯动作运镜了,指哪打哪,真正做到了像摄影师把控镜头一样,还原导演的创作想法。做法也是非常简单,先准备好九宫格分镜,再上传到输入框,接着把角色、场景、声线也依次 at 上,剩下的就交给 c dance。

现在我们再对比分镜,一格格查看,是不是已经基本匹配上了?如果生成效果还不够满意,再用文字补充,把角色和目标的运动方向再补清楚。这样就离影视大片更进一步。当然了,如果你手上已经有一段喜欢的追逐视频,也可以继续用迁移创意的玩法,将参考视频上传,说清楚是借鉴奔跑节奏还是跟拍速度。

角色和场景仍由对应 at 素材决定。不仅如此,如果想让这段精彩的内容继续发展,在 cedence 2.5中还能直接点击使用视频延长,将视频无限延长,甚至连剧情都能跟上。这种无限流视频制作法真的是谁用谁爽!那多模态参考的能力这么强,有同学就问了:“做商业广告也能这么稳定吗?

”来看看由我出镜的这支香水广告,是不是还挺像那么回事的。之前做产品广告最苦恼的就是上传图片的数量限制在了9张,很多细节无法全部上传,容易导致产品对不上。这时候多模态参考的功能就发挥作用了。最多能上传共30张图片。也就是说,我们可以大胆输入多张不同角度的高清产品外观,这样无论怎么运镜、光线怎么变化、平行标签都不会崩。

这里我上传了产品外观图后,还有很多参考图空间,可以继续用人物图锁定角色外观、服装图定义礼服颜色和材质、场景图把握调性和光线。敲敲小黑板了,在这里我还上传了我喜欢的音乐。让模型直接参考音乐的节奏生成视频,生成出来的剪辑节奏非常丝滑,比我直接文字描述给模型要直观的多,还能单独选中做局部编辑。

这样生成出来的广告就几乎不需要剪辑了,一人一个队伍就是这么来的。最后一个案例,我们来做点轻松的游戏过场动画吧。像赛车游戏动画,难在需要露出正确的赛车、赛道和动效。这里就很适合运用创意迁移玩法,拿白模视频做参考,确定车辆运动的速度、运动的方向。

白模视频可以把空间路径展示清楚。想让画面更带劲,还可以再用文字去丰富镜头的拍摄视角。低角度正面视角,汽车原地烧胎;侧向镜头,汽车连续两次高角度漂移通过 s 型弯道;低角度慢动作,汽车冲上坡道并跃入空中等等。对照看看,效果是不是非常惊艳了?同样的白膜参考,还很方便我们更换车衣、更换赛道装饰。

普通人想设计一个属于自己的游戏,也变得简单了起来。回顾一下今天的四个案例,为什么在视频开头我告诉大家往简单了说?因为现在的模型真的变聪明了,想要什么直接指给它看,它就能看懂。玩法五花八门,记住四步公式,选镜头、配素材、艾特点名、检查结果。跟着我的教程直接抄作业,我是 aura,我们下期见。

来源:抖音 · 话题 #即梦AI · douyin.com