Video wird geladen...

Video konnte nicht geladen werden

Zur Startseite

可灵昨晚发布了 O1: 一个大一统的视频、图像生成和编辑工具,支持你能想到所有图像和视频编辑能力。 藏师傅会对这次新增的一些能力进行测试,同时大概教大家一下这个模式应该如何使用 👇下面是具体的教程和测试内容

46,516 Aufrufe • vor 7 Monaten •via X (Twitter)

0 Kommentare

Keine Kommentare verfügbar

Kommentare vom Original-Post werden hier angezeigt

Ähnliche Videos

Google推出了一种在 StableDiffusion 图像生成中保证内容特征一致性的方式。 这个其实是现在图像生成中一个非常重要的问题,故事可视化、游戏开发资产设计、广告等都需要在生成的时候具备角色或者内容的一致性。 从演示来看效果非常好人物角色和其他内容的特征都保持的非常好,他们有一个示例是一个男人的一生十几张不同年龄段的图片都很像能看出来是一个人。 而且这个项目还可以跟 SD 已有的控制方式结合,比如局部重绘和 Controlnet 等。下面是具体的介绍: 实现方法: 身份聚类:这一步骤涉及首先生成一系列图像,然后将这些图像嵌入到一个语义空间中。接着,使用聚类算法将这些图像分组,每个组代表一种可能的角色身份。这个过程旨在识别出一组视觉上一致的图像,从而确定角色的主要视觉特征。 身份提取:在确定了一组具有高内聚性的图像之后,接下来的步骤是通过在这些图像上训练模型来提炼出一个更一致的角色身份。这意味着模型将学习到特定角色的关键视觉特征,以便在未来的生成中更准确地重现这些特征。 收敛性:方法的最后一个步骤是迭代过程,该过程在达到一定的收敛标准时停止。在每次迭代中,模型基于最新的训练数据生成新的图像,并重新进行聚类和身份提取。这个过程重复进行,直到模型能够可靠地生成具有一致视觉身份的角色为止。 效果验证: 定性和定量比较:在这一部分,作者将他们的方法与其他个性化文本到图像生成技术进行比较。这包括通过视觉和数值指标来评估生成图像的一致性和质量。 用户研究:作者还进行了一项用户研究,以评估他们的方法在实际使用中的效果。这包括让用户评价生成图像的一致性和吸引力。 消融研究:这部分是对方法中不同组件的效果进行评估。通过修改或移除方法的某些部分,作者能够理解每个组成部分对最终结果的贡献。 论文链接:

歸藏(guizang.ai)

125,770 Aufrufe • vor 2 Jahren

MiMo推出1000 Token/s超高速模型|体验测评 MiMo 推出了 MiMo V2.5 Pro UltraSpeed 超高速的模型版本,能够实现每秒输出超过 1,000 Token 的速度。 同时,这应该也是全球第一个达到这个速度的万亿(1T)参数模型。 藏师傅提前试了一下,做了三个测试,确实爽。 第一个跑了一个比较复杂的 3D 采矿小游戏测试。在没有素材的情况下,我让它全部用 Three.js 前端代码来生成素材。整体要求比较完整,虽然第一次实践时出了一些小问题,但在跟他沟通修改建议后,非常完美地实现了任务。 这次测试的各项指标如下:思考的 TPS:804 Token/s,峰值速度:810 Token/s,首次响应时间:4.71 秒。 第二个测试给了一个官网,其头部包含一个相对复杂的 3D 动画。 这次的输出速度快了非常多:峰值达到了 1426 Token/s,首次响应只用了 0.83 秒,在 32 秒内输出了 25624 个 Token,总计生成了 1000 行代码。 第三个测试给了一个更复杂的官网。我要求这个官网的 Header 头部包含以下 3D 效果:地球边缘、轨道上的飞船、星际尘埃、航线图、舷窗的 HUD 样式。 这个效果非常好,整体的视觉样式、状态、SVG 动画和驾驶卡片都非常精细,还有滚动的视差效果 这个输出的 TPS 达到了 1136 tokens/s,首次响应是 4.5 秒 官方测试平台下面有个数据展示,会显示相关信息 在流式输出的情况下,当你看着它只用 20 秒就产生一个非常复杂的 3D 游戏时,那种场景还是比较震撼的 之前的这些(比如说 Groq 之类的)超高速推理方案,在模型能力或者是整体水平上都会有所下降,但是 MiMo 这个在测试的时候,我没有看到这种迹象 最近很多公司都开始推出这种超高速的 API 服务,比如之前 OpenAI 和 Anthropic 都有 Fast 模式 在 Agent 场景下,模型输出效率的提升会直接带动每一步 Agent 操作的效率: 如果一个任务预估一分钟完成,你就会盯着它直到结束,然后立刻投入测试。如果需要五分钟才完成,你可能就会去干别的事,然后再回来看,难免会浪费一些时间 这种效率提升在 Sub-Agent 和并发场景下更加明显。因为它可以更快地产出大量结果,想象一下,如果同时启动一两百个 Sub-Agent,在模型能力没有衰减的前提下,速度提高 10 倍,体验是非常爽的 毕竟这本质上是面向那种对效率有极高要求的 To B 客户所推出的 希望后面大家卷起来,优化一下成本,让普通用户也能放开用这种 UltraSpeed 模型

歸藏(guizang.ai)

26,998 Aufrufe • vor 1 Monat

Sora 团队发布了一个新的更新预告 Sora APP即将推出的几项重大更新: - 角色客串功能 - 视频编辑功能 - 社交体验增强 - 使用体验优化 - Android 版即将上线 🙋角色客串(Character Cameos) 功能将在未来几天上线: 你可以把任何对象加入视频中作为“客串角色”: 你的狗、豚鼠、毛绒玩具、或任何你喜欢的东西。 你还可以从自己之前生成的 Sora 视频中,把角色提取出来作为 cameo 使用。 🔝Trending Cameos(实时热门客串) 预计大家会疯狂创造各种 cameo(比如宠物、虚拟人物、玩偶等)。 为了方便大家发现这些创作,Sora 将更新生成界面(UI): → 实时显示热门 cameo 趋势榜(trending cameos)。 📺视频编辑功能 Sora 将引入基础的视频编辑功能,首先支持: 拼接多个短片(stitching clips) 未来还会陆续添加更强大的编辑功能。 👩‍👩‍👧社交体验改进 Sora 不再只是“全局动态流(global feed)”。 团队正在探索更多朋友与社群场景下的使用方式。 他们的目标是: 让你能和朋友、同学、同事一起玩 Sora,而不仅仅是对着全球用户发作品。 例如: 你的大学有一个 Sora 频道; 你的公司、运动俱乐部或兴趣群也有专属频道; 用户可以在不同社群中分享、讨论、创作 AI 视频。 ⚡ 使用体验优化 1. 信息流(Feed)改进 优化推荐质量,让内容更相关、更有趣。 2. 降低过度审核(Moderation) 用户抱怨“生成内容被过度审核”很烦, 正在努力减少不必要的内容封锁。 3. 性能提升 “让整个 App 使用起来更流畅、更快速。” 4. Android 版本即将发布

小互

29,159 Aufrufe • vor 8 Monaten