跳到正文
蚂蚁 inclusionAI:GitHub 新仓库·· 2025-09-29精选AI 评分58

inclusionAI/dInfer

inclusionAI/dInfer

AI 导读

inclusionAI团队发布了dInfer,一个专为扩散语言模型设计的高效推理框架。该框架旨在解决扩散模型在文本生成领域推理速度慢、资源消耗大的核心挑战。dInfer通过一系列底层优化技术,显著提升了推理效率,能够更快地生成文本,同时降低计算成本,为扩散模型在更广泛的实际应用场景中部署提供了关键技术支持。

推荐理由

蚂蚁把扩散语言模型的推理框架开源了,这类模型的推理效率一直是落地瓶颈,做端侧或低成本部署的团队值得看看能不能接上。

来源:蚂蚁 inclusionAI:GitHub 新仓库 · github.com