昇思版本DeepSeek-R1-0528上线魔乐社区

不到10行代码、小时级完成适配，还有原始权重一站直达

魔乐社区

27人浏览 · 2025-06-04 10:22:07

魔乐社区 · 2025-06-04 10:22:07 发布

2025年5月28日深夜，DeepSeek 官方在用户群中宣布完成“小版本试升级”，发布DeepSeek-R1-0528，昇思MindSpore开源社区开发者基于已支持的DeepSeek V3进行快速适配，1小时内完成开发，修改代码小于10行，实现镜像替换、推理任务拉起，经测试验证，模型精度与官方开源版本一致。

基于昇思版本适配的DeepSeek-R1-0528已上架开源社区代码仓及魔乐社区，面向开发者提供开箱即用的模型，便于开发者直接使用或二次开发。

本次快速适配应用了MindSpore Transformers大模型使能套件，该套件依托MindSpore AI框架提供的丰富的多维混合并行能力，亲和开源工具与通用数据格式，原生支持大模型蒸馏的端到端全流程开发，提供了高效、便捷的开发能力

同时，本次推理服务的拉起与部署应用了MindSpore-vLLM插件，支持基于vLLM框架部署MindSpore模型的推理服务。

MindSpore Transformers代码仓：https://gitee.com/mindspore/mindformers
MindSpore-vLLM代码仓：https://gitee.com/mindspore/vllm-mindspore
魔乐社区代码仓：https://modelers.cn/models/MindSpore-Lab/DeepSeek-R1-0528
模型原始权重：https://modelers.cn/models/Modelers_Park/DeepSeek-R1-0528

本次发布的DeepSeek-R1-0528主要升级以下能力：

1、推理与思维深度增强

思考长度翻倍：平均每题推理token从12K增至23K，解题步骤更详尽（如AIME数学题准确率从70%→87.5%）。

幻觉率降低45~50%：在摘要、改写等任务中输出更可靠。

2、编程能力突破

前端代码生成：可一次性生成超千行无Bug代码，支持复杂动态效果（如天气动画、数据可视化）。

多语言支持：在LiveCodeBench测试中Pass@1从63.5%→73.3%，媲美OpenAI o3高版本。

3、新增功能与体验优化

工具调用（Function Calling）：支持外部API调用，Tau-Bench成绩达OpenAI o1-high水平。

创意写作提升：长文本结构更完整，更贴近人类风格。

API兼容性：接口不变，新增JSON输出支持。

手把手教程：DeepSeek-R1-0528 vLLM-MindSpore 使用指南

本项目中提供的DeepSeek-R1-0528模型权重已反量化为BF16，权重文件大小1.3T。

01 环境搭建

环境准备：四台Atlas 800I A2 (64G)，并配置好组网，四台设备的卡与卡之间能够互相ping通。

四台设备分别拉取镜像：

docker pull hub.oepkgs.net/oedeploy/openeuler/aarch64/mindspore:20250529

四台设备分别杀进程，避免其他进程影响：

pkill -9 python
pkill -9 mindie
pkill -9 ray

四台设备分别启动容器，四台设备的hostname需要不同，但容器名称需要一致。

/data/deeepseek_r1_0528/用于存放权重及yaml配置文件。四台服务器都需要下载权重，而且存放路径需要一致，权重文件大小1.3T，需要预留足够磁盘空间。

docker run -it --name=DSR10528 --ipc=host
--network=host --privileged=true --hostname=worker23 \
        --device=/dev/davinci0 \
        --device=/dev/davinci1 \
        --device=/dev/davinci2 \
        --device=/dev/davinci3 \
        --device=/dev/davinci4 \
        --device=/dev/davinci5 \
        --device=/dev/davinci6 \
        --device=/dev/davinci7 \
        --device=/dev/davinci_manager \
        --device=/dev/devmm_svm \
        --device=/dev/hisi_hdc \
        -v /usr/local/sbin/:/usr/local/sbin/ \
        -v /etc/hccn.conf:/etc/hccn.conf \
        -v /usr/local/bin/npu-smi:/usr/local/bin/npu-smi \
        -v /usr/local/dcmi:/usr/local/dcmi \
        -v /usr/local/Ascend/driver:/usr/local/Ascend/driver\
        -v /etc/ascend_install.info:/etc/ascend_install.info \
        -v /etc/vnpu.cfg:/etc/vnpu.cfg \
        -v /data/deeepseek_r1_0528/:/data/deeepseek_r1_0528/ \
        hub.oepkgs.net/oedeploy/openeuler/aarch64/mindspore:20250428 \
        /bin/bash

02 下载权重及yaml配置文件

四台设备分别从魔乐社区下载权重及yaml配置文件。

pip install openmind_hub
export HUB_WHITE_LIST_PATHS=/data/deeepseek_r1_0528
python
from openmind_hub import snapshot_download
 
snapshot_download(  
    repo_id="MindSpore-Lab/DeepSeek-R1-0528",  
    local_dir="/data/deeepseek_r1_0528", 
    local_dir_use_symlinks=False
)
exit()

四台设备分别修改yaml配置文件：

# 修改为模型权重路径 
load_checkpoint: '/data/deeepseek_r1_0528/'
 
# 修改为模型tokenizer.json文件所在路径
vocab_file: '/data/deeepseek_r1_0528/tokenizer.json'
 
# 修改为模型tokenizer.json文件所在路径
tokenizer_file:
'/data/deeepseek_r1_0528/tokenizer.json'

03 启动

四台设备的容器中分别添加环境变量。enp189s0f0是ifconfig命令显示的网卡名称，根据需要调整。

export MINDFORMERS_MODEL_CONFIG=/data/deeepseek_r1_0528/peizhi/predict_deepseek_r1__671b.yaml
export
ASCEND_CUSTOM_PATH=$ASCEND_HOME_PATH/../
export vLLM_MODEL_BACKEND=MindFormers
export MS_ENABLE_LCCL=off
export HCCL_OP_EXPANSION_MODE=AIV
export HCCL_SOCKET_IFNAME=enp189s0f0
export GLOO_SOCKET_IFNAME=enp189s0f0
export TP_SOCKET_IFNAME=enp189s0f0
export HCCL_CONNECT_TIMEOUT=3600
export
ASCEND_RT_VISIBLE_DEVICES=0,1,2,3,4,5,6,7

主机及辅机设置。

选择一台设备作为主节点，执行如下命令：

ray stop
ray start --head --port=6380

其他三台设备作为辅节点，依次执行如下命令：

ray stop
ray start --address=主节点IP:6380

在主节点容器中拉起服务，其他节点不需要。模型路径根据需要调整。

python3 -m vllm_mindspore.entrypoints vllm.entrypoints.openai.api_server --model "/data/deepseek_r1_0528_bf16" --trust_remote_code --tensor_parallel_size=32 --max-num-seqs=256 --block-size=32 --max_model_len=16384 --max-num-batched-tokens=4096 --distributed-executor-backend=ray --gpu-memory-utilization=0.93

发起推理服务请求，若在主节点发起请求，新开一个终端，IP地址是0.0.0.0或者localhost。

curl http://localhost:8000/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "/data/deepseek_r1_0528_bf16",
    "messages": [
      {"role": "user", "content": "请介绍下北京的top景点"}
    ],
    "temperature": 0.1,
    "max_tokens": 4096,
    "top_p": 0.9,
    "repetition_penalty": 1.2
  }'