X智算 · 算力应用平台

🧠 小模型训练(RL 闭环)

消费验证层过滤后的 accepted 轨迹,对一个小模型(默认 Qwen2.5-0.5B)做策略梯度更新; 训完导出 GGUF,经权重分发端点下推给节点侧 llama.cpp,闭环打通。

训练配置

训练侧引擎 = torch/transformers。节点侧推理 = llama.cpp(GGUF)。两端同族。

训练数据(accepted 轨迹)

训练只吃经验证层判定可信的轨迹;被拒样本已在服务端自动剔除。

JSON 结构:{"trajectories":[{"prompt","completion","reward"}, ...]}
已就绪轨迹
0 条
预估消耗积分(平台服务,无节点分成)
-- 分

我的训练任务

任务ID模型步数轨迹数状态创建时间操作
加载中…
运行前提:训练在独立子进程执行,需要目标机装有 torch + transformers; 若缺失,任务会快速标记为 failed 并在日志中给出安装提示。GGUF 导出需配置 LLAMA_CPP_CONVERT 指向 llama.cpp 的转换脚本。