大家好,我是冷逸。
Seedance 2.0用到今天,大家已经玩出了花,但有几个难题依然让行业头疼:一是人物、风格、场景的一致性,二是人物空间位置和镜头位置的控制。工作流设计得不好,就会导致前后两段15s之间不连贯,只能反复抽卡。
尤其是AI短剧行业,这个问题带来的成本还挺重的。
最近看了海辛和阿文的分享,有几点感悟,特别想分享给大家:
1)Seedance对提示词不挑,但还是建议你写清楚主体、场景、音乐和镜头。
主体:指明具体是哪张参考图,名字要贯穿始终;
场景:上传一张场景图就够了;
音乐:一定要提示“不要生成任何BGM”,只生成音效,否则你后期剪辑会非常痛苦;
镜头:时间戳视内容情况而定,但镜号一定要写清楚,比如镜头01、02。
具体的提示词结构,可以参考这个模板(by海辛)。
![]()
2)不用盲目追求分辨率。目前720P对提示词的遵循最好,1080P次之,4K则不行。
3)核心依然是画面控制。你的脑子里要先有具体的分镜、画面、转场、动作、运镜和剧情等细节。有好的画面,才有好的故事。
4)如果你写的提示词,你自己都不看,那也别指望Seedance能给你生成出多么高质量的视频。
这几条经验,有的可以交给工具,有的不能。像提示词结构、主体和场景这些重复工作,完全可以让Agent来处理;但具体的画面、分镜和节奏,最后还是得自己把关。
最近我体验了一款AI视频产品「LuxReal」,体验入口luxreal.com,来自群核科技,他们正朝着这个方向打磨产品。
就在这几天,他们上线了画布模式。偏爱手搓,你可以用画布打磨视频细节;追求效率,你可以让Agent帮你加速。
![]()
最近Seedance 2.5即将上线,他们也会第一时间接入。
![]()
一手体验
下面,我用一个完整的视频制作过程,带大家沉浸式体验一下LuxReal的“双模”驱动。
1)画布模式
我想拍一个科幻短片,故事设定如下:
有一天,女孩小夏醒来,突然发现自己不能说话了,但可以用意念控制身边的物体(不超过100米范围内),她于是起床、出门……由此展开了一场奇幻之旅。 任务:请基于这个设定,帮我构思一段90s的AI短片脚本,分成6段15s视频,分段设计视频提示词给我。 注意: 1、故事逻辑严谨,硬核科幻内核,开放性结尾,看完引人深思。 2、每段15s视频,共设计6段视频提示词给我。
先新建一个画布。
![]()
在画布里双击,就能自由创建文本、图片、视频和分镜表节点。
LuxReal会给我一份含提示词的脚本。
![]()
接着,继续跟它说:
用这个脚本设计需要涉及到的角色和场景的T2I提示词。
然后,就可以用这些提示词去生成人物主体、道具和场景图了。
![]()
生图方面,LuxReal支持香蕉2、Seedream 5.0、MJ V7和Image2。几个模型我都替大家试过了,建议无脑选Image2。
![]()
这里,也分享一个我经常用来生成人物主体图的提示词:
约20岁东亚少女,齐肩微乱黑发,杏眼,鹅蛋脸,浅灰白棉质睡裙,3/4 视角半身清晰,电影级硬科幻写实,干净浅灰纯色背景只展示主体,8K,精致细节,studio 柔光。
这是睡衣版的小夏。稍微改一改,也能得到出门版的小夏。
![]()
现在,人物、场景这些资产图都齐后,接下来就是依据前面的提示词来生成视频。
![]()
视频提示词,严格按照开篇讲的规范来:
在提示词开头就确定主体人物、场景和音乐要求;
音乐要注明“不要生成任何BGM,只生成音效”;
写清楚镜号和镜号内容,时间戳视情况而定;
每个镜号里,要描述清楚场景、景别、人物动作、台词、打光和转场等。
最关键的一点:提示词是用来描述画面内容的,而不是渲染情绪或堆砌无关描述。
![]()
还有一点也很重要,如果你不知道怎么描述,那干脆别描述,讲好故事就行,其余的交给AI自行推理。如果自己瞎写一堆运镜、景别、光源和动作要求,很容易导致画面打架,模型多半也只会给你生成不合格的视频。
我在 LuxReal 里生成的这六段15秒视频,基本一次过。最后放进剪映里剪辑,删掉废镜、加上BGM,一支AI短片《The Silent Radius》就出来了。
2)Agent模式
Agent模式就简单多了,核心是写好剧本。有了剧本,上传给LuxReal即可。
![]()
开拍前,你可以先配置一下你的Agent。
![]()
别看选项有点多,其实就是设置生文、生图和生视频分别用哪个模型、什么尺寸、什么风格。
上传剧本后,LuxReal会自动分析故事情节、场景转折,帮我们把剧本拆分成更故事线更完整的叙事单元。
![]()
与此同时,角色、场景、道具的资产图提示词,以及视频制作提示词,也都会自动设计出来,而且支持批量生成。
![]()
有了资产图,接下来进入生成视频的阶段,LuxReal会根据你的设置,配置好参考图、提示词以及各个片段的时长。
![]()
这里有一点我挺喜欢。
它生成出来的几个片段之间,一致性确实很高,人物不会突然变脸,场景和机位也基本不会乱,这也是我觉得它和很多工具不太一样的地方。
它的做法也挺有意思:不是每15秒单独生成,而是先基于整集剧本生成一段预览视频,把人物造型、空间关系和镜头关系先锁定下来,再从里面提取关键帧,作为后续每个片段的分镜参考。
![]()
这样后面生成的所有片段,都会围绕同一套“参考答案”去生成,所以整部短剧的人物、场景和镜头衔接都会稳定很多,也能少抽不少卡。
所有片段生成完成后,还会自动汇总到剪辑台,直接导出成片。
![]()
给大家看下最终的成片,质量还是挺不错的。
整个过程基本不用动脑,只用动手,一路点点点就行。
在Agent模式下生成的所有叙事单元,都能切换到画布模式。
![]()
导入画布后,Agent模式下生成的所有内容都会被整理成可编辑的节点,方便你自由调整和继续细化。
![]()
用完之后,我最大的感受是,Agent + 画布把AI视频从“一键生成”,变成了一套可以反复推敲、持续打磨的创作方式:既保留了画布的自由度,也解决了纯画布上手慢、搭建成本高的问题。
3)3D片场
前面我提到,在视频生成前,最好在脑子里要先有具体的分镜、画面、转场等细节。
而LuxRea里还有一个很有意思的功能,是「3D片场」,它可以帮你把这些脑海中的镜头具像化。
用2D资产做视频,我们经常会遇到人物空间位置错乱、镜头位置不可控、片段之间不连贯等问题。
在LuxReal里,3D片场可以把2D场景一键变成可漫游的3D影棚。把人物白模放进去,你就能像导演一样自由调整机位和视角,提前确定人物与场景的位置关系。
定好位置关系后,再用LuxReal把白模替换成你生成好的人物资产,截图就能作为后续视频的分镜参考图,这样就能随心所欲地调度人物场景关系和镜头角度。
使用也很简单。在“资产生成 - 场景”板块,选择具体的场景图。
![]()
在场景卡片,点“生成3D片场”发起生成。生成完成后,就可以打开3D片场了。
![]()
在3D片场里,可以360度调整角度、机位、俯仰角,还能添加人物白模。我给大家录屏演示一下,你就明白了。
调整好后,点击“截取画面”,它会把当前视角的分镜图存入资产。
之后再增强效果,可以用人物角色做参考图,这样你的角色就能随时随地出现在片场,想让他出现在哪里,他就在哪里。
![]()
![]()
最近不知道在哪里看到一个观点,挺有意思的。
大意是说:以前,人工要花30天才能做出现在AI的水准;而现在,人+AI同样要花30天,才能做出大家满意的作品。工具门槛在降低,但人的审美标准也在同步提升。
AI视频领域便是如此,如今早已从“生成时代”跨入“创作时代”。
单纯铺量的生成已经无法满足观众,真正能打动市场的是谁能把作品打磨得更好。技术在迭代,观众的审美也在不断提高,对创作者的要求自然也越来越高。
LuxReal给我的感受,就是这样一个围绕创作流程设计的工具。你想手搓,可以进入自由画布雕琢;你要效率,Agent帮你快速起稿。
它没替我做决定,只是帮我把很多需要反复试错的地方提前总结好了,让我少抽了很多卡。
感兴趣的朋友,可以去试试。用完回来评论区告诉我,你的体验如何。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.