Subquadratic 声称解决了困扰 LLM 十年的数学瓶颈
subquadratic 通过大幅削减 transformer 计算,打造出了更快、更便宜的 llm,但专家们仍持怀疑态度。
Subquadratic 公司从隐秘状态中脱颖而出,声称其解决了限制大型语言模型(LLMs)的数学瓶颈,通过大幅减少变换器计算。该初创公司断言,生成的模型比现有选项更快、更便宜、更节能。一些研究人员已经看到了表明这种方法有效的数据,但许多专家仍持怀疑态度。如果属实,这一突破可能会大大降低运行生成式 AI 的成本。