软件开发公司 Nature封面:AI训AI,越训越傻
2024-09-03白交 发自 凹非寺软件开发公司 量子位 | 公众号 QbitAI AI老练AI,可能会让AI变傻?! 来自牛津、剑桥等学校机构的筹商东说念主员最新发现,使用合成数据老练,大模子可能会崩溃。其筹商约束被选为最新的ature封面。 胜利一个:GARBAGE OUT! 要知说念,当今绝大部分科技公司的大模子齐在用合成数据来缓解“数据荒”。这下无疑是整个这个词行业浇了一波冷水。 筹商团队给了这么一个例子。 他们测试了Meta的OPT-125m模子,接头了对于中叶纪建筑的关系信息。 每一次微调齐是由上一