大模型中，线性层的低比特量化（例如 INT8, INT4）已经逐步落地；对于注意力模块，目前几乎各个模型都还在用高精度（例如 FP16 或 FP32）的注意力运算进行训练和推理。

今天，世界见证了 RDT 大模型的诞生，它就像 “小脑” 一样负责控制机器人的运动。

本期机器之心《智者访谈》邀请到清华大学聂再清教授，探讨他在将先进的自然语言处理技术应用于生物医药数据分析的创新实践。

Transformer 的强大实力已经在诸多大型语言模型（LLM）上得到了证明，但该架构远非完美，也有很多研究者致力于改进这一架构

来自清华大学的研究人员提出了一种称为分数去噪（Fractional denoising，Frad）的分子预训练框架，以学习有效的分子表示。

约翰霍普金斯大学计算机科学家 Alan Yuille 表示：「KAN 更易于解释，可能特别适用于科学应用，因为它们可以从数据中提取科学规则。

刚刚，《时代》周刊公布了 2024 年度 AI 领域最具影响力的 100 人名单。

近日，深势科技与北京大学合作，推出新一代模型 Uni-Mol+，迭代升级后的模型拥有更大的参数量，更多的预训练数据量，并展现出更强大的通用性。

今年获奖年龄平均 41 岁。

备受瞩目的 “2024Inclusion・外滩大会” 将于 2024 年 9 月 5 日至 7 日在上海黄浦世博园区举行。