#稀疏注意力

共 25 篇相关文章

深入解析Context Engineering（上下文工程）的核心理念与实践方法。从Prompt Engineering到上下文设计、编排与优化，探讨Karpathy提出的AI工程新范式如何重塑大模型应用开发与AI Agent构建。

深入解析Kimi-Writer开源项目，基于Kimi-K2-Thinking模型构建的AI小说创作Agent，具备深度推理、自主规划和长篇叙事能力。了解其核心架构、技术实现与实际应用场景。

DeepSeek发布V3.2-Exp实验版模型，首次引入自研DeepSeek Sparse Attention（DSA）稀疏注意力技术，大幅提升长上下文训练与推理效率，同时API价格下调超50%。本文详解DSA技术原理、模型架构演进及商业策略。

DeepSeek-V4-Pro API即日起至2026年5月5日享受75折优惠，支持100万token超长上下文窗口，兼容Claude Code、OpenCode等主流开发工具。本文详解定价策略、技术亮点及开发者接入指南。

DeepSeek-V4 Preview正式发布并开源，包含V4-Pro（1.6T参数）和V4-Flash（284B参数）两个版本，支持100万token上下文长度。本文详解V4架构特性、性能定位、开源部署方式及行业影响。