在当前 AI 领域，大语言模型采用的主流架构是 Transformer。

Anthropic 发现一种新型越狱漏洞并给出了高效的缓解方案，可以将攻击成功率从 61% 降至 2%。

马斯克搞大模型，速度也奇快。

半年时间，月之暗面把 AI 模型支持的上下文长度提升了一个数量级，实现了 200 万字上下文的「无损压缩」。