Transformer危险了！ 大家看了我今天的《AI早报》没有？头条就是“谷歌发Titans新架构破Transformer长上下文瓶颈”。为什么说它危险？因为它直击了我们现在用的所有AI模型的核心痛点！平时跟ChatGPT、Gemini聊天是不是总觉得它记性不太好？稍微聊长一点就“失忆”，让它读长文就崩溃？ 这要怪现在主流的 Transformer 架构。它的核心要求是模型每处理一个新的字，就必须回头把前面所有字 挨个看一遍，并且计算它们之间所有复杂的关系。你可以想象一下，如果文本长度翻了一倍，它需要做的计算量和花的精力，可不是简单地翻倍…
