模型

Dream-v0-Instruct-7B

一个70亿参数规模的指令微调扩散语言模型，用于文本生成任务。

时间轴 (近 90 天)

11月6日

实验在 LLaDA-8B-Instruct 和 Dream-v0-Instruct-7B 两个模型上进行，覆盖五个基准测试。

待验证50%

11月6日

与直接连续时间采样相比，SpecCTMC 将顺序模型评估次数减少了 1.73 至 4.38 倍，同时保持了参考采样分布。

待验证50%

11月6日

LLaDA-8B 采用大规模掩码扩散预训练，在指令跟随任务上接近同规模自回归模型；Dream-v0-Instruct-7B 探索了扩散模型在对话场景中的指令微调路径。

待验证50%

实验在 LLaDA-8B-Instruct 和 Dream-v0-Instruct-7B 两个模型上进行，覆盖五个基准测试。

与直接连续时间采样相比，SpecCTMC 将顺序模型评估次数减少了 1.73 至 4.38 倍，同时保持了参考采样分布。

LLaDA-8B 采用大规模掩码扩散预训练，在指令跟随任务上接近同规模自回归模型；Dream-v0-Instruct-7B 探索了扩散模型在对话场景中的指令微调路径。