正在加载视频...

视频加载失败

游戏代打也要失业了? 来看 NVIDIA NitroGen NVIDIA 刚刚又发了个新模型 NitroGen,这是个只有 1B 大小却可以玩游戏的大模型,它接受视频帧输入,然后输出手柄操作。所以非常适合用来玩手柄可以操作的动作类游戏。 这个模型最大的特点是,它是基于游戏视频本身学习的,以往互联网上虽然有很多游戏视频,但是游戏操作并没有记录下来,而 NitroGen 它利用了合成动作标签技术。研究团队通过大规模的逆动力学模型,从公开的互联网游戏视频中“反推”出当时玩家可能按下的键,从而人工合成了海量的训练数据,通过上万小时的纯视频数据进行预训练,打破了数据瓶颈。 而且最重要的是,这个模型支持后训练。这意味着面对一款它从未见过的全新游戏不需要从头训练,只需少量的微调或适配即可上手游玩。

103,360 次观看 • 6 个月前 •via X (Twitter)

0 条评论

暂无评论

原始帖子的评论将显示在这里

相关视频

Kimi-K2.6 前端/后端/Agent编程能力实测! 甚至还帮我做了个游戏! 给大家带来刚刚正式发布的 kimi-k2.6 的正式版本的实测! 本次为了考验它的长程Agentic Coding能力, 我用 kimi-k2.6-code-preview 写了个 harness 游戏自动生成框架, 它可以根据给到的人设/场景/数值设计等规则, 自动生成关卡, 背景图片, 甚至配音! 其中框架驱动和草稿模型使用 kimi-k2.6, 文生图和生成语音由 kimi-k2.6 生成 prompt 后调用其它大模型生成. 最好玩的是, 我做了个"无头"版本的游戏cli接口, kimi-k2.6 能像玩互联网早期Mud游戏一样, 使用纯文本玩这个游戏, 每当它生成关卡之后, 他就可以直接进入游戏游玩一下, 来验证关卡设计得是否正确. 而内部设计又分为了对话生成skill, 脚本生成skill, 关卡生成skill, 游戏测试大师skill, 游戏资深玩家skill(由于检讨游戏性) 等等, 从而实现了让大模型自己写游戏自己玩! 每个关卡大概需要一个小时生成和验证, 如果并行验证应该还能更快一些(做多线程BFS/DFS). 另外本次依旧使用大家都熟悉的测试项目进行了前端/后端/Agent能力测试, 从测试来看, 复杂项目前端能力(建模, 空间理解, 物理模拟等)略有下降, 但后端和 Agent 能力有明显提升. 不过如果你是纯做网站的话, 可以用 kimi 网站上的的 k2.6 Agent 模式, 由于 Agent 能力足够强所以可以在这个模式下多步来提升生成的网站质量和交互体验. #kimi #kimik26 #moonshot #月之暗面 #kimicli

karminski-牙医

40,013 次观看 • 2 个月前

Google的教学视频《Introduction to Large Language Models | 大语言模型介绍》(中英双语字幕) 这个视频介绍了大型语言模型(Large Language Models,LLMs)的概念、使用场景、提示调整以及Google的Gen AI开发工具。 大型语言模型是深度学习的一个子集,可以预训练并进行特定目的的微调。这些模型经过训练,可以解决诸如文本分类、问题回答、文档摘要、跨行业的文本生成等常见语言问题。然后,可以利用相对较小的领域数据集对这些模型进行定制,以解决零售、金融、娱乐等不同领域的特定问题。 大型语言模型的三个主要特征是:大型、通用性和预训练微调。"大型"既指训练数据集的巨大规模,也指参数的数量。"通用性"意味着这些模型足够解决常见问题。"预训练和微调"是指用大型数据集对大型语言模型进行一般性的预训练,然后用较小的数据集对其进行特定目的的微调。 使用大型语言模型的好处包括:一种模型可用于不同的任务;微调大型语言模型需要的领域训练数据较少;随着数据和参数的增加,大型语言模型的性能也在持续增长。 此外,视频还解释了传统编程、神经网络和生成模型的不同,以及预训练模型的LLM开发与传统的ML开发的区别。 在自然语言处理中,提示设计和提示工程是两个密切相关的概念,这两者都涉及创建清晰、简洁、富有信息的提示。视频中还提到了三种类型的大型语言模型:通用语言模型、指令调整模型和对话调整模型。每种模型都需要以不同的方式进行提示。 原始视频链接:

宝玉

114,627 次观看 • 3 年前

兄弟们 这个模式可能是一个AI 游戏新物种 Yoroll:世界模型+AI视频模型 打造了一种全新的游戏体验 他们把视频生成模型从“内容工具”变成“游戏运行层” 也就是通过AI视频模型来为游戏生成剧情和情节走向 他们设计了一个三层分离的结构: 表现层:由AI视频生成模型驱动,相当于一个"AI 导演", 根据游戏状态实时"拍摄"每个场景 交互层:翻译玩家行为,支持选项、点击、滑动、长按、连点、对抗点击等多种 QTE 玩法 系统层:是确定性的游戏逻辑引擎,负责状态管理、分支系统和世界模型 官方案例: 一个没写过剧本、没碰过游戏引擎的《甄嬛传》粉丝,花了不到一周,做出了一款性转版的《甄嬛传》 AI 互动游戏 Demo。 抖音单条视频数万赞,播放量过百万。 这个项目叫"华君传",女尊世界观,男性入宫,宫廷权谋加情感博弈,玩家的每一个选择都会把剧情推向不同方向... 这套设计最聪明的地方在于: 视频模型和游戏逻辑被彻底解耦了。 就像 Netflix 把同一部电影从 1080p 升级到 4K,剧情剪辑一字不改。 AI 只管画面,你看到的场景、镜头、画面表现,这些交给 AI 视频模型去生成。 逻辑由系统管,你选了什么、血量多少、剧情该往哪走、谁是敌人谁是盟友,这些全部由一套固定的逻辑引擎来记录和控制,不靠 AI 猜。 AI 负责好看和剧情,系统负责靠谱,两边各干各的,互不干扰。 这样一来,以后 AI 视频模型升级了,画面直接变好,但游戏逻辑、你的存档、剧情分支全都不用动。 游戏质量只会提高,而且可玩性也会有很大变化...

小互

26,216 次观看 • 3 个月前