#大模型训练
共 275 篇相关文章
·7 分钟
谷歌启动Gemini 4预训练：最雄心勃勃的AI大模型训练
谷歌DeepMind宣布启动Gemini 4预训练，称其为迄今最雄心勃勃的一次训练。本文深度解读Gemini 4的技术方向、算力投入、多模态能力突破，以及对OpenAI、Anthropic等竞争对手的影响。
阅读全文 →
深度解读·9 分钟
大模型训练全流程解析：预训练、SFT微调与偏好对齐通俗详解
详解大模型训练三大核心阶段：预训练、有监督微调(SFT)、偏好对齐(DPO/PPO)，涵盖LoRA、模型蒸馏量化剪枝等关键技术，帮助开发者理解从Base Model到Chat Model的完整流程。
阅读全文 →
产品体验·11 分钟
Cube Studio：腾讯开源一站式AI平台，覆盖大模型训练到推理全流程
深度解析腾讯音乐开源的Cube Studio云原生AI平台，涵盖分布式训练、大模型微调、vLLM推理部署、VGPU虚拟化及国产化昇腾适配等核心能力，助力企业高效落地MLOps全流程。
阅读全文 →
产品体验·14 分钟
Cube Studio：腾讯开源一站式AI平台，大模型训练到推理全覆盖
深度解析腾讯音乐开源的Cube Studio云原生AI平台，涵盖分布式训练、DeepSeek大模型微调、vLLM推理部署、VGPU算力管理等核心功能，支持华为昇腾国产化生态，助力企业构建私有AI基础设施。
阅读全文 →
·6 分钟
微调Qwen3-4B实录：100条数据解决角色混乱问题
分享Qwen3-4B模型微调实践全过程，通过补充100-200条身份稳定数据，成功解决角色混乱问题。详解小模型微调中的数据策略、效果验证方法及MoE架构进阶规划。
阅读全文 →
·6 分钟
1-bit量化突破：27B大模型跑进8GB内存
深入解析1-bit量化技术如何将27B参数的Qwen3大模型压缩至8GB内存运行，保留77%准确率。探讨极致量化的技术原理、实际应用价值及对开源AI生态的深远影响。
阅读全文 →
·5 分钟
Anthropic IPO将AI社会反噬列为风险因素意味着什么
Anthropic在IPO文件中将AI社会反噬(AI backlash)列为正式风险因素，反映AI行业从无限增长叙事转向风险管理。本文解析这一信号对AI行业、资本市场和监管趋势的深层含义。
阅读全文 →
·12 分钟
OpenAI俄亥俄数据中心：电网、用水与社区承诺全解析
OpenAI联合SB Energy和NVIDIA在俄亥俄州派克县建设大型AI数据中心，承诺电网升级费用不转嫁居民、采用闭环风冷系统、创造3.5万建设岗位及8000万美元社区投资。深度解读算力扩张背后的社会契约。
阅读全文 →
·8 分钟
nanoGPT速通技巧：延迟解耦如何解决嵌入层稀疏梯度问题
深入解析nanoGPT速通中的延迟解耦(Delayed Untying)技巧，解释为何在训练前期绑定embed与lm_head权重、后期解耦能同时解决稀疏梯度和表达力受限问题，并剖析权重绑定、差异化学习率等替代方案的优劣。
阅读全文 →
·14 分钟
GPU内存读取原理：延迟隐藏与带宽优化深度解析
深入解析GPU内存读取的完整链路，从warp调度、内存合并到缓存层级，揭示GPU如何通过大规模并行隐藏延迟，并提供内存访问模式优化的实践指南。
阅读全文 →
·7 分钟
Ox Alpha神秘模型曝光：GLM-5.3或通过知识蒸馏获得能力跃升
神秘模型Ox Alpha正在匿名测试中，社区推测其为GLM-5.3背后更大规模的教师模型。本文深入分析知识蒸馏假说，解读大模型竞争中教师模型与学生模型的技术路径。
阅读全文 →
·14 分钟
LangChain入门教程：大模型为何需要这个框架
深入解析LangChain框架的核心价值：如何解决大模型知识截止、无法接入业务数据、缺乏会话状态管理三大局限。了解LangChain与LangGraph的关系演变，帮助开发者快速入门AI应用开发。
阅读全文 →
·13 分钟
Scaloom：AI驱动的Reddit营销平台，抢占搜索与GEO双重红利
Scaloom是一款AI驱动的Reddit营销平台，帮助创业者通过账号养成、精准社区定位和AI辅助回复，在Google搜索和ChatGPT等AI引擎中提升品牌可见度，实现从SEO到GEO的双重获客。
阅读全文 →
·13 分钟
xAI推出Grok Bot办公智能体，Gemini月活破10亿
xAI发布Grok Bot办公智能体，支持独立登录工具执行任务；Gemini月活突破10亿成Google最快增长产品；微软Maya 200芯片成本比NVIDIA低40%；Claude Opus 5 Max重登基准测试榜首；Mistral拟托管中国GLM模型。
阅读全文 →
·15 分钟
从零实现GRPO：PyTorch手写强化学习算法详解
详解如何用纯PyTorch从零实现GRPO（群组相对策略优化）算法，涵盖群组采样、优势归一化、概率比裁剪、KL约束等核心步骤，可在消费级GPU上运行，适合深入理解大模型后训练强化学习机制。
阅读全文 →
·8 分钟
HyNote for Mac：免费本地化会议转录工具，数据永不离开设备
HyNote for Mac是一款完全本地运行的免费会议转录工具，无需云端上传、无机器人打扰，支持Zoom、Google Meet等主流平台。深度解析其隐私保护架构、使用体验及竞品对比。
阅读全文 →
·15 分钟
从AI到大模型：理清人工智能概念脉络与技术演进路径
一文梳理人工智能、机器学习、深度学习、大模型、生成式AI之间的关系与发展脉络。从深蓝到ChatGPT，理解Transformer架构如何催生大语言模型，以及普通人如何切入AI应用开发。
阅读全文 →
·11 分钟
权重不变算真正的递归自我改进吗？深度解析AI自我优化的边界
探讨AI递归自我改进的核心争议：当模型权重保持不变，仅通过上下文优化实现的能力提升是否算真正的自我改进？本文从技术逻辑与哲学角度剖析权重改进与上下文改进的本质区别。
阅读全文 →
