Skip to main content

DeepSeek 发布 mHC 架构,提升大模型训练稳定性AI 公司 DeepSeek 于 2025 年 12 月 31 日在 arXiv 公开了名为 mHC(Manifold-Constrained Hyper-Connections)的新架构,并于 2026 年 1 月 1 日出现在 Hugging Face Papers 页面

  1. DeepSeek 发布 mHC 架构,提升大模型训练稳定性

    AI 公司 DeepSeek 于 2025 年 12 月 31 日在 arXiv 公开了名为 mHC(Manifold-Constrained Hyper-Connections)的新架构,并于 2026 年 1 月 1 日出现在 Hugging Face Papers 页面。该架构旨在使大模型训练过程中的超连接更加稳定,同时保持其性能优势。

    相关技术论文已在 Hugging Face Papers 页面收录。mHC 架构通过流形约束的超连接技术,旨在缓解大规模模型训练中连接稳定性的不稳定问题,并在论文中报告相关实验结果。

    Adina Yakup | Hugging Face

    🍀在花频道 🍵茶馆聊天 📮投稿

    via 科技圈🎗在花频道📮 - Telegram Channel
👀 open eyes to see the world. 丨 site views: -