Video yükleniyor...

Video Yüklenemedi

Ana Sayfaya Dön

🚨 如何用Veo 3制作更长的视频: Justine Moore(a16z合伙人)花了几个小时实验新的图像到视频模式。 她发现了一种方法,可以生成一致且连贯的故事,比8秒的限制要长得多。 教程和技巧👇原文

33,651 görüntüleme • 1 yıl önce •via X (Twitter)

10 Yorum

AI Will profil fotoğrafı
AI Will1 yıl önce

首先:Veo 3仍然每次只能生成8秒的视频。 但你可以通过将一个片段的结尾帧作为下一个片段的起始帧来“延长”这个时间。 这听起来很简单,但实际上有点挑剔。这个经验为了让你避免浪费积分。

AI Will profil fotoğrafı
AI Will1 yıl önce

(1) 记住,最后一个片段的结尾帧是模型唯一的上下文。 因此,任何你希望之后再次出现的角色、物体或环境都必须出现在那个帧中。 例如,如果想让女人出现在下一个场景中,这个片段就不起作用。

AI Will profil fotoğrafı
AI Will1 yıl önce

(2) 要知道,模型将使用图像中出现的内容来驱动未来的动作。 有时候,这会超过你的文本提示。 例如:一个关于水豚关掉电脑的片段。用结尾帧(在这里)来驱动下一个片段,在那个片段中我希望它起身走开。 这里明确地提示了超过10次。但因为它的爪子在电脑上,模型每次都会让它重新打开电脑!

AI Will profil fotoğrafı
AI Will1 yıl önce

(3) 你不能上传自己的音频,所以无法在多个片段中保持一致的角色声音。 有时通过提示特征(如口音、年龄、语调)会起作用。但并不完美——下面听一下同一个人跨两个片段的对话。 要解决这个问题,你可以选择: 1.) 在ElevenLabs上生成一致声音的片段,并用它们作为配音(将Veo视频中人物说话的部分静音) 2.) 直接使用Hedra,它让这个过程更容易!

AI Will profil fotoğrafı
AI Will1 yıl önce

(4) 在不同环境中放置相同角色时并不完美。 如果你想改变服装或场景,但保持角色一致性,推荐先使用Flux Kontext编辑图像。 在这种情况下,这里上传了角色的照片,并要求Kontext把她放在舞台上穿着专业服装。然后将输出结果作为在Veo 3上的新起始帧。

AI Will profil fotoğrafı
AI Will1 yıl önce

(5) 细节在多次迭代中有时会退化。 比较一下第一个视频中女性发言者的脸部(在第一个片段)和第5个片段中的脸部。就像打电话传话一样——细节每次都会变化,而且这些变化会累积。 还没有找到解决办法。幸运的是,我们对非自己脸部的变化不那么敏感 😂

AI Will profil fotoğrafı
AI Will1 yıl önce

GenAI Week 2025 Silicon Valley:湾区数万人大会! 🔗 Will粉丝专属购票链接(可享受15%优惠): 官网: 地点:圣克拉拉会议中心 时间:2025年7月13日~17日 超20 家国际媒体出席并进行广泛报道

AI Will profil fotoğrafı
AI Will1 yıl önce

以上就是全部,原作者 @venturetwins 如果您喜欢这个主题: 1.关注我(@FinanceYF5) 2. 点赞+转发下面第一条帖子

Premium profil fotoğrafı
Premium1 yıl önce

Watch a lot of video on X? Upgrade for the smoothest experience.

meomeo1516 profil fotoğrafı
meomeo15161 yıl önce

确实,拼接思路靠谱,但细节很关键,你们有试过优化过渡吗?

Benzer Videolar

Pixverse 发布 R1 实时视频世界模型 藏师傅也试了一下 前几天测试的 Pixverse R1 终于发布了,这是一个可以实时生成并且可以随时通过提示词介入修改后续内容的世界模型。 极限情况下可以实时生成 1080P 的高清视频,感觉成本再下来一点以后 AI 游戏和交互式的影视内容有戏了啊。 ------ 简单介绍一下使用体验,目前他们在一个单独的平台测试需要邀请码。 你可以选择预制的的三个主题进行体验,三个主题分别是巨龙巢穴、二战主题、海底世界,正式版本会增加到 6 个。 也可以创建自己的主题,选择画面比例、风格输入主题相关提示词就可以了。 生成之后主要的互动就是在他播放的过程中输入提示词来改变当前视频生成的剧情走向。 而且这里生成的视频居然还是带音乐、音效混合旁白的,比以前所谓的实时生成的模型强了不少。 ------ 算法和架构上主要的优化有: 这是个原生的多模态模型支持将文本、图像、视频、音频统一为连续的 Token 流,接受任何模态的输入。 PixVerse-R1 改成了非扩散的自回归架构,用来实现无限连续的生成,还使用了增加注意力机制,确保长时间生成的内容一致性。 为了适配实时视频生成的性能,他们将原来的迭代降噪逻辑进行了多项优化,他们叫瞬时响应引擎 (IRE),主要包括三个优化: Temporal Trajectory Folding:传统模型从噪点到清晰图像需要迭代几十步,他们直接暴力压缩到仅需 1–4 步。 Guidance Rectification:直接将传统的 CFG 逻辑蒸馏到了模型参数内部,节省了时间。 Adaptive Sparse Attention:生成高分辨率的视频的时候让模型学会学会“抓大放小”,自动识别重要区域进行精细计算,大幅降低计算负载。 ------- 目前由于成本问题需要邀请码才能测试,生成的分辨率是 480P,过几天会提高到 720P。

歸藏(guizang.ai)

16,373 görüntüleme • 5 ay önce