前置条件

  • 架构: x86_64
  • 芯片型号: Hygon BW1000
  • 宿主机驱动: 6.3.30-V1.4.1a
  • 容器工具包 (可选) : dcu-container-toolkit >= 1.3.0

镜像内容

基于

harbor.baai.ac.cn/flagos-runtime/flagos-runtime-hygon-dtk26.04:2.1.2 open_in_new

Python

3.10

应用软件包

sglang==0.5.18+flagos

sglang-fl==0.1.dev1+g440208beb

启动

已发布: harbor.baai.ac.cn/flagos-app/sglang0.5.18-hygon-dtk26.04:2.1.2-0.1.dev1_g440208beb

镜像名较长——先将其设为变量：

  IMG=harbor.baai.ac.cn/flagos-app/sglang0.5.18-hygon-dtk26.04:2.1.2-0.1.dev1_g440208beb

以下两种方式任选其一：

使用容器工具包

启动交互式 shell：

  docker run --rm -it \
  -e DCU_VISIBLE_DEVICES=all \
  $IMG bash

以默认设置启动应用：

  docker run --rm -it \
  -e DCU_VISIBLE_DEVICES=all \
  $IMG

向启动器传参：

  docker run --rm -it \
  -e DCU_VISIBLE_DEVICES=all \
  $IMG sglang-serve --model-path <path> --port 9000

无需工具包——直接使用 docker / podman

启动交互式 shell：

  docker run --rm -it \
  --device /dev/kfd \
  --device /dev/mkfd \
  --device /dev/dri \
  --group-add video \
  -v /opt/hyhal:/opt/hyhal \
  --security-opt seccomp=unconfined \
  $IMG bash

以默认设置启动应用：

  docker run --rm -it \
  --device /dev/kfd \
  --device /dev/mkfd \
  --device /dev/dri \
  --group-add video \
  -v /opt/hyhal:/opt/hyhal \
  --security-opt seccomp=unconfined \
  $IMG

向启动器传参：

  docker run --rm -it \
  --device /dev/kfd \
  --device /dev/mkfd \
  --device /dev/dri \
  --group-add video \
  -v /opt/hyhal:/opt/hyhal \
  --security-opt seccomp=unconfined \
  $IMG sglang-serve --model-path <path> --port 9000
Edit this page

Last updated 24 Sep 2026, 13:40 +0800. history