跳到正文

数据与训练

训练侧的门道:数据集构建、合成数据、预训练与后训练方法、算力与训练成本。

最新精选

第 1–20 条 · 共 35 条
今天10月1日周四
9月29日周二
  1. Hugging Face Blog76

    NVIDIA 发布 Kumo Tabular 表格预测基础模型

    NVIDIA 发布 Kumo Tabular,一款面向表格分类和回归的开放基础模型,可在单次前向推理中直接预测新行,无需训练、调参或特征工程。模型提供 28M 至 215M 参数的三种规格,通过 Hugging Face 提供,采用 OpenMDW-1.1 license,支持商业使用。

    推荐理由:材料同时交代了免训练推理、人工数据预训练方式与四项基准结果,便于评估其工程可用性。

9月24日周四
  1. NVIDIA Blog74

    NVIDIA与合作伙伴如何用开放科学为下一次大流行做准备

    NVIDIA与Google DeepMind等机构合作,通过AlphaFold Database公开超过2,800种病毒蛋白质复合物的预测3D结构。数据由AlphaFold2结合NVIDIA BioNeMo Inference Runtime生成,约30%的蛋白质相互作用此前未在Protein Data Bank中记录。

    推荐理由:开放数据覆盖超过2,800种病毒且约30%的蛋白质相互作用此前未被记录,同时提供可复用的结构预测流程。

9月11日周五
  1. Google Research60

    Google Research 提出 ToolGrad:用文本“梯度”高效生成工具调用数据集

    Google Research 在 ACL 2026 介绍 ToolGrad,通过先生成经验证的工具调用链,再标注对应用户查询,迭代构建更复杂的工具调用数据。基于 ToolBench 的 16k+ APIs,ToolGrad 以更低成本和更高通过率生成数据;使用 ToolGrad-500 微调的 Gemma-3-12B 在 BFCL 上取得 83.1 分。

    推荐理由:文章清楚拆解了从工具链生成、执行筛选到查询更新的流程,并用 BFCL 结果展示该方案的训练效果与成本取舍。

9月8日周二
  1. Google DeepMind78

    Google DeepMind 推出 AlphaGenome Atlas,预测人类基因组 9 billion 个单核苷酸变异影响

    Google DeepMind 推出 AlphaGenome Atlas,预计算人类基因组约 9 billion 个单核苷酸变异的分子影响预测。平台提供由 AlphaGenome 和 AlphaMissense 预测整合而成的 AVI score,并通过网站、AlphaGenome API 和 Google Antigravity 中的 skill 提供访问。

    推荐理由:文章把 AlphaGenome Atlas 的数据、AVI 评分和真实研究案例串联起来,呈现其如何帮助研究者筛选非编码变异并追踪分子影响。

  2. Mistral AI76

    Mistral 完成 €3B Series D 融资,推进主权开放权重 AI

    Mistral 宣布完成 €3B Series D 融资,投后估值超过 €21B,Samsung Electronics 领投,Scaleup Europe Fund 和 PSG Equity 联合领投。公司将扩大前沿研究、训练算力和基础设施,推动商业增长与国际化布局,并继续发展由开放权重模型、基础设施、算力和产品组成的全栈方案。

    推荐理由:这轮融资把 Mistral 的开放权重路线与训练算力、基础设施和商业扩张放在同一项资本动作中观察,呈现其主权 AI 定位的推进方式。

9月4日周五
  1. Google Research82

    Google Research 发布完整雄性果蝇脑及中枢神经系统连接组图谱

    Google Research 与 HHMI Janelia 等合作发布了雄性果蝇大脑和中枢神经系统的完整连接组图谱,包含超过166,000个神经元和125 million个突触连接,按神经元数量计算为目前最大的脑图谱。该成果发表于 Cell,图谱经过 HHMI Janelia 人类专家标注和校验。研究人员可通过开源工具 Neuroglancer 查看、探索和下载这份数据。

    推荐理由:文章展示了 AI 连接组学如何把电子显微镜切片重建为可验证的细胞级图谱,并说明雌雄连接组可用于研究神经差异和行为机制。

9月3日周四
  1. Hugging Face Blog60

    LFM2.5-350M 如何用 GRPO 提升结构化输出合规性

    Hugging Face Blog 给出使用 TRL 和 GRPO 微调 LFM2.5-350M 的公开流程,在约 500 个样本和 100 个训练步骤后,IFStruct 通过率从 22.6% 提升至 29.7%。该流程使用 LoRA 训练约 6M 参数,并在相同服务栈下比较基础模型与微调模型,JSON 通过率由 18.0% 提升至 31.9%,YAML 由 27.2% 变为 27.5%。

    推荐理由:文章给出基于 TRL 和 GRPO 的小模型结构化输出微调流程,并用同一 IFStruct 服务栈展示 22.6% 到 29.7% 的可复现实测变化。

9月2日周三
9月1日周二
8月21日周五
  1. Microsoft Research60

    Microsoft Research 发布 Skala 1.1,扩展 DFT 精度与软件集成

    Microsoft Research 发布 Skala 1.1,训练数据量达到上一版本的 2.5x,并在热化学、反应动力学和分子结构预测等任务中提升准确性。在 GMTKN55 的 55 个类别中,Skala 1.1 有 32 个类别获得最高排名,当前已集成到 CP2K,并正在接入 Psi4、FHI-aims、ORCA 和 VASP。

    推荐理由:文章将 Skala 1.1 的精度提升、2.5x 数据扩展与 CP2K 等软件集成放在一起,呈现其从模型改进走向科研工作流应用的路径。

8月17日周一
  1. Google Research63

    Google Research 提出 PhotoScan 用智能手机图像估计心脏代谢风险

    Google Research 介绍 PhotoScan,一种从标准 2D 智能手机照片估计体脂率、A/G 比和 V/S 比的深度学习框架。模型使用 UK Biobank 的 35,323 条记录预训练,并在 677 名成人数据上微调,在 132 人的独立验证队列中评估。

    推荐理由:文章比较了 PhotoScan、BIA 与 DXA 在体成分估计和胰岛素抵抗分类上的表现,呈现了智能手机图像的应用边界。

8月12日周三
8月10日周一
8月6日周四
  1. Google DeepMind87

    Google DeepMind 开源 WeatherNext,飓风预测平均提前获得一天优势

    Google DeepMind 发布并开源 WeatherNext 2、WeatherNext Cyclones 和 WeatherNext 2-mini,WeatherNext Cyclones 在飓风路径、强度和风场结构预测上平均获得超过 24 小时的提前量。

    推荐理由:原文同时给出 WeatherNext 的预测增益、训练数据规模和开源范围,便于了解 AI 气象模型如何支持更早的飓风风险研判。

8月4日周二
7月23日周四
  1. Google Research71

    Google Research 展示让量子计算机从错误中学习的强化学习控制

    Google Research 在 Nature 发表研究,展示一种强化学习框架,可利用量子错误检测事件持续调节控制参数,在计算不中断的情况下抵抗漂移。该方法在 Willow 超导处理器上使逻辑稳定性提升 3.5 倍,并在人工校准后进一步将逻辑错误率降低 20%;模拟显示所需训练迭代次数与系统规模无关。

    推荐理由:文章把量子纠错产生的错误检测事件转为强化学习信号,展示了连续校准如何在不中断计算的情况下抑制硬件漂移。

7月9日周四