当Transformer遇见粒子云:一种理解大模型的全新物理学视角当Transformer遇见粒子云:一种理解大模型的全新物理学视角 你有没有想过,当你向ChatGPT输入一句话时,那几个简单的文字在模型的“脑海”里究竟经历了什么? 我第一次读到“把Transfor...软件科技# GPT-3# Hopfield神经网络# Query Key Value3个月前843
深科技观察深科技观察 说实话,每次看到Nvidia发布新品,我的第一反应都是去扒技术白皮书,而不是看那些标题党的报道。这次他们在GTC 2025前后放出的Cosmos 3,确实让我眼前一亮——不是因为参数又翻了...软件科技# CUDA生态# Nvidia Cosmos 3# Omniverse3个月前1.4K
贝索斯的下一个野心:物理AI赛道上的千亿赌注贝索斯的下一个野心:物理AI赛道上的千亿赌注 当科技行业还在为大语言模型的算力战争喋喋不休时,杰夫·贝索斯已经悄然将目光投向了另一个战场。6月12日,由他与维贾伊·巴贾杰联合创立的物理AI公司Prom...软件科技# AI初创企业# Figure AI# Prometheus3个月前1K
特征工程里那个危险的谎言:为什么机器学习模型”数据越多越受伤”特征工程里那个危险的谎言:为什么机器学习模型"数据越多越受伤" 说实话,我第一次看到这个结论时,脑子里冒出的第一个想法是:这不对劲啊。 做机器学习这么多年,从导师到教科书,从各种技术博客到顶会论文,所...软件科技# AutoML# 伪相关# 信号与噪声3个月前949
当开源社区的首页被”N”字母占领当开源社区的首页被"N"字母占领 引子:从"美国的开源回来了"说起 我刷到这条推文的时候,停下来想了好几秒。Natolambert 贴出的截图很清楚:HuggingFace 首页前 30 个模型里,有...软件科技# AI模型# CUDA# GPU通用计算3个月前1.1K
当你输入”一只猫”,AI是怎么”画”出来的?当你输入"一只猫",AI是怎么"画"出来的? 说实话,我第一次用 Midjourney 的时候,盯着屏幕上那张逐渐清晰的照片,心里冒出一个巨大的问号:这台机器到底是怎么知道"猫"长什么样的? 不是开玩...软件科技# AI图像生成# AI绘图原理# AI绘画3个月前1.1K
当简单打败复杂:AI记忆系统的“自我感动”该结束了当简单打败复杂:AI记忆系统的“自我感动”该结束了 说实话,看到这项研究结果的时候,我愣了好几秒。一项由持续学习领域顶尖研究者发布的基准测试,用数据告诉我们:过去这些年,我们可能在记忆系统上投入了大量...软件科技# AI记忆系统# CL-Bench# 上下文学习3个月前925
550B参数、100万token上下文,NVIDIA开源了一个”怪物级”AI Agent模型550B参数、100万token上下文,NVIDIA开源了一个"怪物级"AI Agent模型 说实话,当我第一次看到Nemotron 3 Ultra的参数规格时,我以为自己看错了——550B总参数,但...软件科技# 550B参数# AI Agent模型# AI基础设施3个月前1.5K