Google Research 提出“睡眠”框架帮助 LLM 在持续学习中保留知识
Google Research 提出 sleep framework,针对部署后 LLM 持续更新参数时的灾难性遗忘问题,探索一种让模型在持续学习中吸收新知识并保留旧能力的新方式。
训练侧的门道:数据集构建、合成数据、预训练与后训练方法、算力与训练成本。
Google Research 提出 sleep framework,针对部署后 LLM 持续更新参数时的灾难性遗忘问题,探索一种让模型在持续学习中吸收新知识并保留旧能力的新方式。
美国联邦法官在 Bartz v. Anthropic 案中裁定,Anthropic 盗版斯坦福教授等作者的书籍训练 Claude 构成侵权,同时认定合法购书训练大模型属合理使用。案件以 15 亿美元和解,覆盖近 50 万部注册作品,但沃尔夫与其他 27 位作者认为赔偿不足,退出和解并另案要求每部作品最高 15 万美元的法定赔偿。
推荐理由:文章梳理 Bartz 案裁决与 15 亿美元和解的关键细节,可借此了解美国法院对盗版训练与合理使用界限的划分。