#低显存
共 36 篇相关文章
教程攻略·8 分钟
GPT-OSS开源模型本地部署教程：实测效果与显存占用分析
详细介绍OpenAI开源GPT-OSS模型的本地部署全流程，使用Ollama在RTX 4090上实测20B版本的中文理解、逻辑推理等能力表现，分析MoE架构下的显存占用与硬件需求。
阅读全文 →
科技前沿·9 分钟
Hugging Face开源Agent生态全解：从本地部署到AI自动训练
深度解析Hugging Face开源Agent生态系统：开源模型已追平闭源表现，本地Agent部署方案对比（Hermes/LLama/Plandex），Skills系统实现对话式自动训练模型，MCP集成实战案例，一文掌握AI Agent开发全链路。
阅读全文 →
科技前沿·9 分钟
Gemma 4 + DGX Spark：开源大模型与桌面级算力如何改变AI开发
NVIDIA与Google DeepMind联合展示Gemma 4开源模型在DGX Spark桌面平台上的视觉翻译、长上下文问答和实时代码生成能力，解读开源AI与边缘算力融合的产业趋势及开发者实际启示。
阅读全文 →
深度解读·8 分钟
微软Tutel：MoE模型加速库深度解析，支持FP4/FP8低精度计算
深度解析微软开源Tutel MoE优化库，支持FP8、NVFP4、MXFP4多精度计算，适配DeepSeek、Kimi-K2、Qwen3等主流MoE模型，解决All-to-All通信瓶颈与显存管理难题。
阅读全文 →
教程攻略·10 分钟
4-bit QLoRA微调LLaMA 3实战：消费级GPU训练80亿参数大模型指南
详解如何使用QLoRA和Unsloth框架在消费级GPU上微调LLaMA 3 8B大模型。涵盖4-bit量化、LoRA低秩适配、Alpaca数据格式、训练流水线搭建到模型部署的完整流程，RTX 3090即可运行。
阅读全文 →
产品体验·7 分钟
awesome-LLM-resources：GitHub 8200星LLM学习资源库全面解析
深度解析GitHub万星项目awesome-LLM-resources，涵盖LLM多模态生成、Agent智能体、模型训练推理、MCP协议等十大核心模块，为AI从业者提供一站式大语言模型学习导航。
阅读全文 →
深度解读·14 分钟
Hugging Face Transformers：16万Star开源AI框架深度解析
深度解析Hugging Face Transformers开源框架，涵盖核心架构、Pipeline API、Auto Classes机制、多模态模型支持及社区生态。了解这个16万Star项目如何成为AI开发事实标准，助你快速上手预训练模型的推理与训练。
阅读全文 →
科技前沿·6 分钟
Kimi K2官方验证工具K2-Vendor-Verifier：一键检测API供应商模型精度
Moonshot AI开源K2-Vendor-Verifier工具，专门验证第三方Kimi K2 API供应商的推理精度。本文详解该工具的核心功能、技术实现思路及对开发者选型的实际价值，帮助你避开过度量化、模型替换等API市场隐患。
阅读全文 →
产品体验·8 分钟
Cube Studio：腾讯开源一站式AI平台，MLOps全流程深度解析
深度解析腾讯音乐开源的Cube Studio云原生AI平台，涵盖Notebook开发、Pipeline编排、分布式训练、大模型微调、推理部署及国产化适配等核心能力，助力企业快速构建MLOps全流程基础设施。
阅读全文 →
教程攻略·10 分钟
Hugging Face Transformers：16万Star背后的秘密与实战指南
深度解析Hugging Face Transformers开源框架，涵盖全模态模型支持、pipeline极简API、Hub生态系统及社区贡献机制。了解这个16万Star项目如何推动AI民主化，附Python代码示例与实战入门指引。
阅读全文 →
产品体验·12 分钟
Cube Studio深度解析：腾讯开源一站式云原生AI平台
深度解析腾讯开源AI平台Cube Studio，覆盖分布式训练、大模型微调、推理部署、VGPU虚拟化及国产化适配等核心功能，帮助企业构建MLOps全流程一站式AI基础设施。
阅读全文 →
产品体验·13 分钟
Hugging Face Transformers：16万Star背后的技术架构与实战指南
深入解析Hugging Face Transformers开源框架，涵盖核心架构、Pipeline API、模型微调、多模态支持等关键技术，帮助开发者快速掌握这个拥有16万GitHub Star的AI模型定义框架。
阅读全文 →
产品体验·8 分钟
Cube Studio深度解析：腾讯开源云原生AI平台，MLOps全流程实战指南
深度解析腾讯音乐开源的Cube Studio云原生AI平台，覆盖分布式训练、大模型SFT/RLHF微调、vLLM推理部署、VGPU虚拟化、国产昇腾适配等核心能力，助力企业快速构建MLOps全流程体系。
阅读全文 →
教程攻略·15 分钟
Ollama教程：一键本地部署DeepSeek等大模型
Ollama是GitHub上17万Star的开源工具，支持DeepSeek、Qwen、Gemma等主流大模型本地运行。本文详解Ollama的安装使用、支持模型、适用场景及核心优势，助你快速实现大模型本地化部署。
阅读全文 →
产品体验·14 分钟
LibreChat：一个界面接入所有AI模型的开源聊天平台
深度解析LibreChat开源项目，支持GPT-5、Claude、Gemini、DeepSeek等多模型统一接入，内置Agents、MCP协议、代码解释器等功能，Docker一键部署，适合个人和企业自托管的ChatGPT替代方案。
阅读全文 →
产品体验·14 分钟
Cube Studio：腾讯开源一站式AI平台，大模型训练到推理全覆盖
深度解析腾讯音乐开源的Cube Studio云原生AI平台，涵盖分布式训练、DeepSeek大模型微调、vLLM推理部署、VGPU算力管理等核心功能，支持华为昇腾国产化生态，助力企业构建私有AI基础设施。
阅读全文 →