跳到正文

数据与训练

训练侧的门道:数据集构建、合成数据、预训练与后训练方法、算力与训练成本。

最新精选

第 21–34 条 · 共 34 条
7月8日周三
  1. Google Research62

    Google Research 在 10 座美国城市实验导航协同分流缓解拥堵

    Google Research 在 Nature Cities 发表研究,在 10 座美国城市开展为期六个月的实验,通过修改 Google Maps 算法将遇到预设拥堵路段的行程引导至耗时相近的替代路线,仅不到 2% 的行程收到改道建议。

    推荐理由:Google Research 在 10 座美国城市做了为期半月的真实路网实验,读者可了解协同导航对全城车速与排放的实际影响。

7月7日周二
  1. Hugging Face Blog78

    LeRobot v0.6.0 发布:世界模型策略、奖励模型与部署 CLI

    Hugging Face 发布 LeRobot v0.6.0,围绕机器人学习闭环引入世界模型策略(VLA-JEPA、FastWAM、LingBot-VA)、新一批 VLA(GR00T N1.7、MolmoAct2、EO-1、EVO1、Multitask DiT)以及统一奖励模型 API(Robometer、TOPReward)。

    推荐理由:LeRobot v0.6.0 把世界模型策略、奖励模型与部署 CLI 串成闭环,读者可据此了解开源机器人学习栈的新能力边界。

6月30日周二
  1. Google Research67

    Google 发布 TabFM:面向表格数据的零样本基础模型

    Google 发布 TabFM,一个面向表格数据分类与回归的零样本基础模型,把表格预测重构为上下文学习问题,无需手动训练、超参数调优和特征工程,单次前向传播即可对未见过的表格生成预测。

    推荐理由:原文给出 TabFM 的架构设计与 TabArena 基准结果,读者可据此判断零样本表格预测能否替代传统树模型流程。

5月20日周三
5月19日周二
5月17日周日
5月16日周六
  1. Google DeepMind60

    WeatherNext 如何帮助美国国家飓风中心预测飓风 Melissa 登陆牙买加

    Google DeepMind 与 Google Research 开发的 AI 天气模型 WeatherNext 帮助美国国家飓风中心提前五天预测飓风 Melissa 将以五级强度登陆牙买加,置信度达 80%,三天前升至接近 100%。

    推荐理由:原文给出 WeatherNext 在飓风路径与强度预测上的实际表现,读者可了解 AI 天气模型如何辅助官方预警决策。

4月30日周四
4月22日周三
  1. Google DeepMind62

    Google DeepMind 发布 Decoupled DiLoCo 分布式训练架构

    Google DeepMind 发布 Decoupled DiLoCo 分布式训练架构,将训练拆分为异步通信的计算孤岛,降低带宽需求并隔离硬件故障。测试中该系统在整块 learner unit 掉线后仍能继续训练并重新接入,用 Gemma 4 模型达到与传统训练相当的基准性能。

    推荐理由:原文给出跨数据中心异步训练在带宽、容错与混合硬件上的实测结果,可据此判断分布式预训练的工程取舍。

3月25日周三
3月18日周三
  1. Mistral AI67

    Mistral AI 推出 Forge,让企业用自有知识训练前沿模型

    Mistral AI 发布 Forge,一套让企业基于自有专有知识构建前沿级 AI 模型的系统,支持预训练、后训练和强化学习等阶段。Forge 同时支持 dense 和 MoE 架构,并可按需支持多模态输入,模型可在企业内部基础设施中训练与治理。官方称已与 ASML、Ericsson、欧洲空间局等机构合作,并支持 Mistral Vibe 等智能体用自然语言完成微调、调参与合成数据生成。

    推荐理由:Mistral 官方披露 Forge 的训练流程与架构支持,可据此判断企业自建前沿模型的门槛与路径。

3月12日周四
  1. Google Research69

    Google 在 Flood Hub 上线城市山洪预报,提前 24 小时预警

    Google 宣布在 Flood Hub 上线城市山洪预报,可提前最多 24 小时预测城市山洪风险。该模型基于 RNN 与 LSTM 架构,使用 Gemini 从公开新闻报道中提取历史山洪事件构建 Groundsource 数据集进行训练,目前以 20x20 公里分辨率运行,覆盖人口密度超过每平方公里 100 人的区域。

    推荐理由:Google 把城市山洪预警扩展到 Flood Hub,读者可了解其用 Gemini 从新闻中提取训练数据的方法与全球覆盖思路。

  2. Google Research60

    Google 推出 Groundsource,用 Gemini 将新闻报道转为灾害数据

    Google 发布 Groundsource,一种用 Gemini 从非结构化新闻中提取灾害事件的方法,首个开放数据集收录 260 万条城市山洪记录,覆盖 150 多个国家、时间跨度从 2000 年至今。

    推荐理由:Google 用 Gemini 从 80 种语言的新闻中抽取洪水事件,构建 260 万条历史数据集,并给出人工核验的准确率。