Leaf Yeah!'s banner
Leaf Yeah!'s profile picture

Leaf Yeah!

@leaf_sanren1,207 subscribers

🌱 哲学 - 数据分析 - 个人开发者 ⌨️ 个人目标:20个GitHub开发小项目,目前进度4/20(YeJe-cpu) 我等也并非闲之辈,人若无名,专心练剑。 INTP,爱自由。

Shorts

这两天搞AIGC的视频里,最没有AI感的一个。 眼神、神态、脸上的肌肤纹理,甚至女生有小胡子。 AIGC 视频一直在进步。 替代真人拍摄,只是时间问题。 当然,这波AIGC实践下来,也感觉,想要灵动地克隆我峰哥的颜🤔, 光能按提示词生视频还不行,得语音时候实时渲染出来,得再调研学习一下

这两天搞AIGC的视频里,最没有AI感的一个。 眼神、神态、脸上的肌肤纹理,甚至女生有小胡子。 AIGC 视频一直在进步。 替代真人拍摄,只是时间问题。 当然,这波AIGC实践下来,也感觉,想要灵动地克隆我峰哥的颜🤔, 光能按提示词生视频还不行,得语音时候实时渲染出来,得再调研学习一下

74,464 Aufrufe

我们小新怎么就不能当宗主呢? 不需要某2.5模型,也能做出来! 除了原贴的提示词, 下面这个,也可以应用在seedance 2.0之外的,比如 Happyhorse 1.1,不卡审。 -- 1. 画面与运镜对标: (a) 完全对标视频【 {{Video 1}} 】,复制全部运镜、景别、背景音乐及卡点节奏。 (b) 全程运镜顺滑稳定无卡顿,动态镜头稳定。 2. 人物与动作还原: (a) 以图片【 {{Image 1}} 】人物作为画面 C 位,男主 1:1 还原视频中心男主的全套舞蹈动作。 (b) 周边伴舞用图片【 {{Image 2}} 】,同步匹配原视频伴舞动作与站位。【注意, {{Image 1}} 主体,即C位人物,不出现在伴舞人物里】 (c) 人物动作丝滑流畅,动态流畅度拉满,无畸形、无穿模问题。 补充:C位人物表情,开心表情有表演感觉,眼神交流感,有微表情 3. 场景与画质要求: (a) 场景替换为【 {{Image 2}} 所在背景的场景】。 (b) 超真实真人质感,好莱坞歌舞大片电影质感,光影细腻,高清 4K 画质。

我们小新怎么就不能当宗主呢? 不需要某2.5模型,也能做出来! 除了原贴的提示词, 下面这个,也可以应用在seedance 2.0之外的,比如 Happyhorse 1.1,不卡审。 -- 1. 画面与运镜对标: (a) 完全对标视频【 {{Video 1}} 】,复制全部运镜、景别、背景音乐及卡点节奏。 (b) 全程运镜顺滑稳定无卡顿,动态镜头稳定。 2. 人物与动作还原: (a) 以图片【 {{Image 1}} 】人物作为画面 C 位,男主 1:1 还原视频中心男主的全套舞蹈动作。 (b) 周边伴舞用图片【 {{Image 2}} 】,同步匹配原视频伴舞动作与站位。【注意, {{Image 1}} 主体,即C位人物,不出现在伴舞人物里】 (c) 人物动作丝滑流畅,动态流畅度拉满,无畸形、无穿模问题。 补充:C位人物表情,开心表情有表演感觉,眼神交流感,有微表情 3. 场景与画质要求: (a) 场景替换为【 {{Image 2}} 所在背景的场景】。 (b) 超真实真人质感,好莱坞歌舞大片电影质感,光影细腻,高清 4K 画质。

13,455 Aufrufe

Videos

leaf_sanren's profile picture

٩(•̤̀ᵕ•̤́๑)ᵒᵏᵎᵎᵎᵎ 我克隆了网红【峰哥亡命天涯】的声音和记忆,让 AI 用他的方式跟我实时对话。 第一次听到"峰哥"的声音从电脑里怼我,愣了几秒。。 像跟直播连麦一样。 这个项目我叫它 Talk to Me,从 V1 到 V3.6 迭代了好几轮。它干的事:你说话,AI 用克隆出来的声音回你,记得你们聊过什么,还带着那个人的性格和说话方式。 怎么做到的——四个开源项目 + 云 GPU 拼出来的: • 本地笔记蒸馏 → 352 条笔记压成人格和说话风格 • LiveKit → 实时语音通话的底层框架 • VoxCPM → 云 GPU 上跑中文音色克隆 • OpenViking → 长期记忆,聊过的内容能找回来 没用大厂现成方案,STT→LLM→TTS 每一环都自己拆过换过踩过坑。比如... Cartesia 中文克隆翻车、GPU 迁移重配 SSH、粒子 UI 丑到没法看……全链路延迟从 8-20秒/句 压到 1 秒内。 其实一开始只是想跟自己对话——蒸馏自己的知识库,克隆自己的声音---- 我太寂寞了,想着自己和自己对话呢🤫 后来觉得不够有意思,就换成了网红的音色和人格,体验一下就完全不一样了。 这也让我意识到:不只是"我的分身",而是谁都可以有一个能实时对话的 AI 版本。 代码还很粗糙,坑还很多。但如果大家觉得有意思,后面可以拆解技术细节做个系列。 附一条自测 demo 👇

Leaf Yeah!

64,404 Aufrufe • vor 21 Tagen

Keine weiteren Inhalte verfügbar