共 5 篇文章
MSA(Memory Sparse Attention)是盛大集团旗下 EverMind 团队开源的长记忆框架,主张把检索和生成合进一个端到端可训练的稀疏注意力层,在 2 张 A800 上支撑 1 亿 token 的记忆推理。本文依据 GitHub 仓库、arXiv 论文与 Hugging Face 模型卡,拆解其架构、三阶段推理与 Memory Interleave 多跳机制,梳理实测数据与局限,并分析它对银行 RAG 知识库、长历史智能体和数据合规的意义。
第九届《State of AI Report 2026》10月8日发布(244页)。报告显示Anthropic、OpenAI、Google三强、基准饱和,两家合计年化收入1050亿美元、固定性能年降约13倍、harness影响比模型大7.8倍、开源模型处理62.7%的token。本文从金融行业角度重算成本、建设、路线、自主、客户、采购估值、安全合规七笔账,并给出落地建议。
2026年10月6日,谷歌发布 EmbeddingGemma 2:Apache 2.0 开源的 740M 统一嵌入模型,把文本、代码、图像、视频、音频映射进同一 768 维空间,量化后全模态仅约 567MB 内存,官方支持 Unsloth 微调。本文核验其开源与微调能力,并分析对银行信贷资料拼图式语义分析、多模态语义图谱关联、风险预警检测的价值与落地路线。
2026年9月2日德勤全球宣布推出Open Model Engineering实践,核心动作之一是在全球雇佣、培训并认证基于开源模型的forward deployed engineers(FDE,前向部署工程师)。本文拆解该新闻稿并溯源FDE概念,论证银行为何尤其需要FDE,并给出银行版FDE的七维能力画像与落地路径。
2026年9月2日,Anthropic 发布旗舰模型 Fable 5.1(公众安全版)与 Mythos 5.1(已审核专家版),ARC-AGI-2 达90.0%、ARC-AGI-1 达97.5%,平均推理成本较上代下降约32%;然而发布数小时后,越狱研究者 Pliny the Liberator 便公开了长达27.5万字符的完整运行时组装指令——涵盖核心行为逻辑、记忆系统、搜索与版权规则、工具路由及全部46个工具的JSON架构,而官方同日仅披露约2.7万字。大量原始资料显示,这套'提示词'实为一份融合员工手册、合规手册与工具参考的巨型运行资产,其中版权红线、'永不存储'记忆禁区、工具调用规范等信息密度极高。本文以该事件为切口,讨论安全护栏的可剥离性、版权对齐、类别级隐私治理、工具后训练与推理成本效率五个维度,对后训练与开源模型生态提出启示。