POD“ NO2-PIPELINE-X5KPD-2954674781”无效：spec.volumes [3] .name：重复值：'no2-pvc;

Question

嗨，我正在尝试运行KubeFlow管道。

两个步骤将并行运行，并将数据转储到PVC的两个不同文件夹中，然后第三个组件将将数据从这些文件收集到文件夹，并将它们合并在一起，并将合并的数据转移到另一个PVC文件夹中。

这是我的管道代码：

vop = dsl.VolumeOp(
            name='no2-pvc',
            resource_name = "no2-pvc",
            size="100Gi",
            modes = dsl.VOLUME_MODE_RWO
        )

    ##LOADING POSITIVE DATA##

    load_positive_data = dsl.ContainerOp(
        name='load_positive_data',
        image=load_positive_data_image,
        command="python",
        arguments=[
            "/app/load_positive_data.py",
        ],
        pvolumes={"/mnt/positive/": vop.volume}).apply(gcp.use_gcp_secret("user-gcp-sa"))


    ##LOADING NEGATIVE DATA##

    load_negative_data = dsl.ContainerOp(
        name='load_negative_data',
        image=load_negative_data_image,
        command="python",
        arguments=[
            "/app/load_negative_data.py",

        ],
        pvolumes={"/mnt/negative/": vop.volume}).apply(gcp.use_gcp_secret("user-gcp-sa"))

    
    ##MERGING POSITIVE AND NEGATIVE DATA##

    marge_pos_neg_data = dsl.ContainerOp(
        name='marge_pos_neg_data',
        image=marged_data_image,
        command="python",
        arguments=[
            "/app/merge_neg_pos.py"
        ],
        pvolumes = {"/mnt/positive/": load_negative_data.pvolume, "/mnt/negative/": load_positive_data.pvolume}
        #volumes={'/mnt': vop.after(load_negative_data, load_positive_data)}
    ).apply(gcp.use_gcp_secret("user-gcp-sa")).after(load_positive_data, load_negative_data)


    ##PROCESSING MARGED DATA##


    process_marged_data = dsl.ContainerOp(
        name='process_data',
        image=perpare_merged_data_image,
        command="python",
        arguments=[
            "/app/prepare_all_dataset.py"
        ], 
        pvolumes = {"/mnt/pos_neg": marge_pos_neg_data.pvolume}
    ).apply(gcp.use_gcp_secret("user-gcp-sa")).after(marge_pos_neg_data)

负载阳性数据和负载阴性数据运行良好，但是Marge-Pos-neg-Data步骤正在给出以下错误：

This step is in Error state with this message: 
task 'no2-pipeline-x5kpd.marge-pos-neg-data' 
errored: Pod "no2-pipeline-x5kpd-2954674781" is invalid: 
spec.volumes[3].name: Duplicate value: "no2-pvc"

希望您的帮助解决问题。

Answer 1

pvolumes = {“/mnt/stustry/”：vop.volume}）和pvolumes = {“/mnt/noad/noad/“：vop.volume}）正在创建两个独立的PVC。