Lambert等人创办非营利实验室,公开研究自我改进风险
高风险方向改走公开路线,能否让外部学者真正复现前沿实验,取决于算力与细节披露。
Nathan Lambert与Tom Zick于10月2日创办非营利机构Trillium Labs,专做通常被前沿实验室封闭的高风险方向。
研究重点包括递归自我改进(RSI,让AI参与研发新模型、可能失去人类控制的过程)和后训练微调,做法是公开实验细节,供外部科学家研究和复现。Lambert曾在Ai2和Hugging Face工作,长期推动开放模型;Zick曾在哈佛大学任职,并为嘉信理财制定负责任AI政策。
资金方面,机构已从Schmidt Sciences、Halcyon Futures等获得一笔未披露金额,创始人称目标共募资4000万至1亿美元,未来18个月计划投入3000万美元用于训练。目前实验室尚无已发表成果,承诺能否兑现仍待观察。
信息源:https://trilliumlabs.org/https://www.wired.com/story/trillium-labs-wants-to-do-high-risk-ai-research-in-the-open