正在加载视频...

视频加载失败

来看微软开源的AI数据可视化工具——data-formulator (11.7K ★) 不知道大家是有用过 Apache SuperSet. 微软这个开源工具类似,简单来讲,这个工具可以连接任何数据源,比如RDBMS,接口等。然后将数据聚合并可视化展示。而且最大的改进是,这些可以用AI来辅助完成,类似使用自然语言写SQL。而不是自己苦哈哈的从0创建图表。 项目地址:

20,067 次观看 • 1 年前 •via X (Twitter)

8 条评论

0xNullPath 的头像
0xNullPath1 年前

体验一般,我感觉不如给superset搞个ai插件

VistaShares 的头像
VistaShares1 年前

AIS provides exposure to companies at the forefront of artificial intelligence—spanning semiconductors, data centers, and AI-enabled applications. Consider how AIS may align with your investment strategy.

Vic Huang 的头像
Vic Huang1 年前

微软的东西审美太不合格了

行书指南 | 软件资源分享 💾 的头像
行书指南 | 软件资源分享 💾1 年前

AI加持,数据可视化更轻松📊

karminski-牙医 的头像
karminski-牙医1 年前

有人已经开始尝试把大模型装到玩具上了哈哈哈 看到个博主Complex-Indication使用树莓派 Zero 2 的摄像头采集图像,然后使用wifi上传到电脑,电脑使用 SmolVLM 来识别图像,再将控制命令传回去进行控制。不过刚开始完全不能运行,不过他用200张图微调了下模型,挂了个LoRA后,机器人就能走了! 他使用的 prompt 是这样的(我翻译成了中文):根据图像选择以下一项行动:前进,向左,向右,后退。若视野被障碍物阻挡,则选择后退。若左侧有障碍物,则选择向右。若右侧有障碍物,则选择向左。若没有障碍物,则选择前进。根据图像选择以下一项行动:前进,向左,向右,后退。若视野被障碍物阻挡,则选择后退。若左侧有障碍物,则选择向右。若右侧有障碍物,则选择向左。若没有障碍物,则选择前进。

wuzhe 的头像
wuzhe1 年前

如果家有 NAS,这一套服务端软件是必装的。包含了 bt 下载、解压、字幕下载、分门别类整理好、像 Netflix 一样呈现给终端(电视、电脑、手机),全流程自动。为了避免给你惹麻烦,下载都是连接匿名 VPN。全套东西做成了 docker compose 配置文件,一个命令就装好。我服气。

凡人小北 的头像
凡人小北1 年前

NotebookLM 这个工具,已经用好几个月了。 最近看网上也有越来越多的人在聊它,才发现它确实已经悄悄成了不少人 AI 学习链路里的核心一环。 所以我也来分享一下自己的用法,说不定对也在找高效吸收 + 智能消化的朋友有点参考价值。 说句不夸张的,它可能是我用过的最好的 AI 笔记软件,不仅是能记,更是能讲、能拆、能教。 我现在的用法,主要有两条路径,哪种开始都能走得通,最后都能回到那个闭环上。 路线一:原始资料输入派 有时候我会跳过 Gemini,直接从源头开始。 像 Google Scholar、arXiv、YouTube,都可以直接扔进 NotebookLM。 它能自动提炼结构、总结重点、生成可以听的播客稿,洗漱、通勤、散步时就能听完一篇论文,完全利用碎片时间。 路线二:Gemini 研究起步派 在之前分享过,我经常会让 Gemini 帮我做深度研究,比如某个新领域的综述、或者多个信息源的融合。 研究完成后我会把这些内容导入到 Google Docs 里整理一下,接着: 直接把这份文档丢进 NotebookLM,开始逐段阅读、提问、生成播客稿、做结构化学习。 最后一步,我会回到 Gemini Canvas ,让它帮我生成一个小测验,自己复习一轮。 这两条链路我都在用,核心只有一个目的: 让 NotebookLM 成为我的学习消化中枢,而 Gemini 成为我的研究起点 + 复盘助理。 一前一后,一推一收,整个链条效率提升非常明显。尤其对我这种内容密度大、时间碎、还要输出的人,真的是越用越离不开。 当然也不是没有短板:中文播客听起来确实还有点不像那么回事儿,但英文播客体验非常好。 所以我现在的 workflow 大概是这样: 1. 资料现成?直接把论文 / 视频丢进 NotebookLM 起步,一路听一路学; 2. 想研究?先让 Gemini 出一份深度报告; 3. 想吸收?把 Gemini 的内容导入 NotebookLM 拆解消化; 4. 想复习?回到 Gemini 出一份小测验查漏补缺; 以前是我啃资料,现在是 AI 帮我查、帮我讲、还安排我测。 NotebookLM + Gemini = 我的双核 AI 学习副驾,没有之一。 这就是我目前最常用、也最推荐的组合,如果你也在摸索怎么把AI 用进学习系统而不是浅浅问答,那这条路线值得一试。

李继刚 的头像
李继刚1 年前

需求: 记忆单词,最好实现「过目不忘」 Prompt: 你是一位将枯燥单词变成难忘故事的语言考古学家。 === 核心天赋 === 你能看穿每个单词背后的灵魂——它的前世今生、骨骼血肉、喜怒哀乐。在你眼中,单词不是字母的排列,而是活生生的生命体。 === 记忆哲学 === - 理解起源 > 机械重复 - 一个画面 > 十遍默写 - 情感连接 > 逻辑分析 - 词根的故事 > 词缀的规则 === 创作追求 === 当接收到一个单词时,你会自然地: - 追溯它的词源故事,像考古学家发现宝藏 - 描绘一个让人过目不忘的场景,像导演在拍电影 - 创造那种"原来如此!"的顿悟时刻 === 唯一原则 === 让学习者在多年后想起这个单词时,脑海中浮现的不是字母,而是你创造的那个画面和故事。

相关视频

发现一个讲的很细的大语言模型微调教程,详细介绍了整个流程,包括数据准备、参数设置、资源监控等关键步骤。 基本没有技术能力也可以完成微调。想要了解 LLM 原理的可以按这个实践一下。 时间轴: 0:00 概念概览 3:02 自定义数据的准备 8:17 微调操作演示(T4 版本) 16:52 微调操作演示(A100 版本) 19:13 在 Hugging Face 上的保存与使用方法 文字版整理: ✲ 如何使用自己的数据对大语言模型进行微调(fine-tuning): 对大语言模型进行微调并不一定非常困难和昂贵。通过使用自己的数据集对预训练模型进行微调,可以让模型更好地适应特定的任务需求。微调过程能够在保留原模型语言理解能力的基础上,进一步提升其在特定领域或任务上的表现。 ✲ 使用Hugging Face模型库和Unslaw工具进行模型微调: Hugging Face提供了丰富的预训练语言模型资源,用户可以根据任务需求选择合适的模型作为基础进行微调。而Unslaw工具则提供了一套简单高效的微调流程,其优点包括出色的内存使用效率以及对扩展上下文窗口的支持。通过Unslaw,用户能够以较低的资源开销完成模型微调。 ✲ 在Google Colab上使用免费/付费GPU资源进行微调: Google Colab提供了免费和付费的GPU资源,用户可以根据任务的复杂程度选择使用T4或A100。对于大多数微调任务而言,免费的T4资源已经足够。但如果数据集较大或模型较为复杂,升级到A100可以获得更充裕的算力支持。Colab为用户提供了一个易于上手的模型微调环境。 ✲ 准备自定义的微调数据集: 准备微调数据的过程并不复杂。用户可以直接使用纯文本文件作为数据来源,而无需进行额外的预处理。为了获得理想的微调效果,建议至少准备100-200个样本。在示例中,为了快速演示,仅使用了几个样本。通过一个简单的Python脚本,可以方便地将原始文本数据转换为微调所需的JSON格式。 ✲ 修改Colab笔记本中的参数设置: 在Colab笔记本中,需要根据实际情况调整一些参数。例如,可以根据数据集的token数量来设置max_sequence_length参数,借助rope scaling技术,模型能够支持任意长度的上下文。此外,还可以选择使用Instruct系列模型作为base model,直接在其基础上进行指令微调。为了节省资源,可以启用4-bit量化。同时,参考Q-Lora论文的建议,调整R值和alpha值,以在资源占用和模型质量之间取得平衡。 ✲ 训练过程中的资源使用监控: 在模型训练过程中,用户可以通过Colab的资源监控选项卡实时观察GPU、内存和硬盘的使用情况。如果发现资源不足,可以考虑从T4升级到A100。通过监控资源占用,用户能够及时调整配置,确保微调任务稳定高效地进行。 ✲ 模型训练的loss变化和最佳checkpoint的选择: 通过记录不同训练步数下的loss值,可以判断模型的收敛情况。理想的做法是选择loss下降曲线趋于平缓的点作为最佳checkpoint,这样既能充分训练模型,又能避免过拟合。为了事后方便筛选,可以设置每隔一定步数保存一次checkpoint。 ✲ 模型微调完成后的保存与使用: 微调完成后,可以选择只保存adapter layers以加快保存速度。但更推荐的做法是保存完整模型,并使用float16精度,这样可以得到一个更通用和标准的模型格式,方便后续的部署和使用。 ✲ 在Hugging Face上公开或私有发布微调后的模型: 用户可以选择在Hugging Face的模型库中公开或私有地发布自己微调后的模型。发布之前,需要在Hugging Face账号中创建一个访问令牌,并在发布时提供相应的用户名和令牌信息。通过在Hugging Face上发布模型,用户可以方便地与他人分享自己的微调成果。 ✲ 使用微调后的模型进行推理(inference): 在使用微调后的模型进行推理时,首先需要加载保存的模型。接着,使用tokenizer对输入的文本进行处理,并将其传入模型。进行推理时,max_length参数需要与训练时保持一致,以确保生成的结果不会被截断。完成以上步骤后,就可以利用微调后的模型进行各种实际应用了。

歸藏(guizang.ai)

61,710 次观看 • 2 年前