微信扫一扫 分享朋友圈

已有 173 人浏览分享

[Sora培训内容]    Sora如何保持场景不变,如何设计一致性场景

Sora培训内容 2024-2-28 21:47:10173 0

任何的剧情类内容都离不开场景,第一个视频剧情看起来很好,但随着时间发展到第二个剧情生成时你会发现你很难描述出同样的场景,及时是相同的提示词,相同的一句话场景还是不同的,那么今天我们就分享这些知识,如何设计场景,如何使用,如何做到连续场景一致性。

设计场景

我们可以再SORA的提示词中设计场景,并且多么复杂都可以,这需要你懂一些建筑、装修类的知识,或空间类知识,因为这些知识更能解释的清楚一个房屋,一个街道他的比例,空间,设施,功能等,通过专业的建筑知识设计出来的东西更现实更符合逻辑,也更美观。如果你不懂也没关系,你也可以用GPT来帮你设计,或者你来提供参考图或视频。

场景用法

用法就是将人、物、场景独立出来,在进行融合,但你要注意了,这几个因素同时受到风格的影响,看似相同的风格的人物,物体,和场景组合在一起可能就都会变样,这里面存在一些技巧。

连续场景


sora和dalle的不同就是一个是文生图,一个是文生视频,其实都是图像,都是帧的概念,但视频比图片多了一个时间的概念,他会发展,每秒都在发生变化,你可以叫它动态镜头,从技术的角度上其实叫时空变化,技术表达上叫时空标记 ,英文是spacetime patches。时空标记和整个序列的时空标记是推断一致性构图和一致性框架的核心技术。时空标记包含非常多的元素,以下为主要元素。

  • 时间轴
  • 物理环境
  • 人物
  • 事件
  • 动作


给你们举个例子,大家都知道清明上河图,非常长的一幅画卷,展开后,我们逐渐往后看,每往后看一眼,其中的时空都在变化,画面都在自然扩展,你感觉的每一个不同的画面之间的分割线就是时空标记正准备在变化。所以你可以用时空标记来推动情景变化,这种行为叫做创新场景。如果你不想创新,你就告诉它以清明上河图为场景让一个人从图画左侧往右走一分钟。它就能很好的表达,所以你可以让人物在你设计的场景中运动,也可以再已知的场景中运动。

如何使用时空标记又是一项很专业的知识,我们再做漫画的时候也用到了,但再DALLE3中它的模型不是很支持,但也能够体现出它的一致性。

Openai Sora-Sora如何保持场景不变,如何设计一致性场景(1) Openai Sora-Sora如何保持场景不变,如何设计一致性场景(2)


如以上DALLE3的图片演示,前后两句话,我在开发他的时候设定了场景的推断逻辑,让两个人发生的故事始终出现在同一个场景中。

我的第一句话是 姬紫月来到超市,第二句是碰到了叶凡,它理解了中间的过程变化,来到,运动事件,碰到,这就是时间变化其中蕴含了时空元素。

报名学习

关于整个Sora的视频制作内容,我们整理了一套完整的课程,同时版主也在开发提示词工具,到时开发好了一起送与报名的同学。

Openai Sora-Sora如何保持场景不变,如何设计一致性场景(3)


课程详情:http://www.niubo1ai.com/thread-531-1-1.html


当然,不打算报名的同学我们后续也会逐步的分享更多后续的知识。
精彩内容推荐
  • 联系我们
  • 邮箱:1992608358#qq.com(请把#改成@)
  • 微信:leileiseo
  • QQ客服 1992608358
  • 工作时间:周一至周五(早上9点至下午5点)
  • 微信公众平台

  • 扫描访问手机版

QQ|NIUBOYI ( 京ICP备17025393号 )

GMT+8, 2024-5-16 13:00 , Processed in 0.058518 second(s), 50 queries .

POWERED BY NIUBOYIAI! 主理人:NIUBOYIAI  点亮哥

Copyright © 2001-2020, NIUBOYI AI.