3

我正在尝试使用 Gitlab CI/CD 构建和运行我的 Docker 映像,但是即使在本地一切正常,我也无法解决一个问题。

这是我的 Dockerfile:

FROM <internal_docker_repo_image>
RUN apt update && \
    apt install --no-install-recommends -y build-essential gcc
COPY requirements.txt /requirements.txt

RUN pip install --no-cache-dir --user -r /requirements.txt

COPY . /src
WORKDIR /src
ENTRYPOINT ["python", "-m", "dvc", "repro"]

这就是我运行容器的方式:

docker run --volume ${PWD}:/src --env=GOOGLE_APPLICATION_CREDENTIALS=<path_to_json> <image_name> ./dvc_configs/free/dvc.yaml --force

在本地运行时一切正常,但在 Gitlab CI/CD 上运行时失败。

stages:
  - build_image

build_image:
  stage: build_image
  image: <internal_docker_repo_image>
  script:
    - echo "Building Docker image..."
    - mkdir ~/.docker
    - cat $GOOGLE_CREDENTIALS > ${CI_PROJECT_DIR}/key.json
    - docker build . -t <image_name>
    - docker run --volume ${PWD}:/src --env=GOOGLE_APPLICATION_CREDENTIALS=<path_to_json> <image_name> ./dvc_configs/free/dvc.yaml --force
  artifacts:
        paths:
          - "./data/*csv"
        expire_in: 1 week

这会导致以下错误: ERROR: you are not inside of a DVC repository (checked up to mount point '/src')

万一您不知道 DVC 是什么,这是一个用于机器学习的工具,用于对模型、数据集、指标进行版本控制,此外,还可以设置您的管道,在我的案例中使用它。

本质上,它需要两个文件夹.dvc,并且.gitdvc repro执行的目录中。

.dvc在这种特殊情况下,鉴于文件夹的内容完全相同并且两者都存在,我不知道为什么它无法运行此命令.git

提前致谢!

4

1 回答 1

4

您的问题与未使用 Docker COPY 复制的隐藏文件 .envCOPY . /src的原因相同。你可能需要在你的.!.dvc.dockerignore

此外,docker run --volume ${PWD}:/src将覆盖容器/src,因此$PWD它本身将需要.git&等。在运行这些命令.dvc之前,您似乎没有克隆 repo 。script

于 2021-05-12T15:09:57.710 回答