Uploaded image for project: 'OpenShift Bugs'
  1. OpenShift Bugs
  2. OCPBUGS-4723

some CSVs, subscriptions and install plans deleted on cluster with OCPBUGS-4645

XMLWordPrintable

    • Icon: Bug Bug
    • Resolution: Duplicate
    • Icon: Critical Critical
    • None
    • 4.10.z
    • OLM
    • None
    • None
    • Rejected
    • False
    • Hide

      None

      Show
      None

      Description of problem:

      On cluster with issue https://issues.redhat.com/browse/OCPBUGS-4645 ( where CSVs are upgraded, but the subscription still says upgradePending and points to older installPlan) , some CSVs, subscriptions and installplans deleted. We haven't did it manuallyon cluster. 

       

       

      Version-Release number of selected component (if applicable):

       

      How reproducible:

      1/1

      Steps to Reproduce:

      1.The scenaio haappend when cluster left running for few days with Issue OCPBUGS-4645 2.
      
      

      Actual results:

      Few Csv missing, all pods running, and all subscriptions and install plans shall present

      $ oc get subs
      NAME                                                                           PACKAGE                   SOURCE                          CHANNEL
      addon-ocs-provider-qe                                                          ocs-osd-deployer          addon-ocs-provider-qe-catalog   alpha
      odf-operator-stable-4.10-redhat-operators-openshift-storage                    odf-operator              redhat-operators                stable-4.10
      ose-prometheus-operator-beta-addon-ocs-provider-qe-catalog-openshift-storage   ose-prometheus-operator   addon-ocs-provider-qe-catalog   beta
      
      $ oc get pod
      NAME                                                              READY   STATUS                 RESTARTS          AGE
      88a0658272c278a25a89cd5b3986546adf0d42df313337e12d332bc47bjfpnk   0/1     Completed              0                 5d22h
      addon-ocs-provider-qe-catalog-kf2rl                               1/1     Running                0                 5d22h
      alertmanager-managed-ocs-alertmanager-0                           2/2     Running                0                 6d21h
      ocs-osd-aws-data-gather-7d4fc748c-7nr6t                           1/1     Running                0                 5d22h
      ocs-osd-controller-manager-577b88bf8c-n9v5n                       3/3     Running                0                 5d22h
      ocs-provider-server-cf67cf98-8drqc                                1/1     Running                0                 5d22h
      odf-console-5d58fb588c-mr8r4                                      1/1     Running                0                 5d22h
      odf-operator-controller-manager-6c8db59967-b9ct2                  2/2     Running                0                 5d22h
      prometheus-managed-ocs-prometheus-0                               3/3     Running                0                 6d21h
      prometheus-operator-8547cc9f89-cg54h                              1/1     Running                0                 6d21h
      rook-ceph-crashcollector-ip-10-0-132-150.ec2.internal-696dg5nr2   1/1     Running                0                 5d22h
      rook-ceph-crashcollector-ip-10-0-159-33.ec2.internal-67b549fg9x   1/1     Running                0                 5d22h
      rook-ceph-crashcollector-ip-10-0-169-167.ec2.internal-7777r2srd   1/1     Running                0                 5d22h
      rook-ceph-mds-ocs-storagecluster-cephfilesystem-a-cd87b965wg756   2/2     Running                0                 5d22h
      rook-ceph-mds-ocs-storagecluster-cephfilesystem-b-9b748476sv6l7   2/2     Running                0                 5d22h
      rook-ceph-mgr-a-7d97798bdf-r696q                                  2/2     Running                0                 3d23h
      rook-ceph-mon-a-545f8d8c4d-ktsx7                                  1/2     CreateContainerError   0 (44h ago)       5d22h
      rook-ceph-mon-b-694d68d8fc-vdgkt                                  1/2     CreateContainerError   0 (44h ago)       5d22h
      rook-ceph-mon-c-c596b8b78-msn6l                                   1/2     CreateContainerError   0 (44h ago)       5d22h
      rook-ceph-osd-0-7c777f44d6-d7h4h                                  1/2     Running                320 (5m8s ago)    5d22h
      rook-ceph-osd-1-85b9d7b84f-8mscs                                  1/2     Running                320 (66s ago)     5d22h
      rook-ceph-osd-2-584454dcd-m66j4                                   1/2     Running                657 (5m24s ago)   4d13h
      rook-ceph-osd-prepare-default-0-data-0s6jlt-v9g2l                 0/1     Completed              0                 6d21h
      rook-ceph-osd-prepare-default-1-data-0xsrjc-wklrt                 0/1     Completed              0                 6d21h
      rook-ceph-osd-prepare-default-2-data-07djjs-k42z6                 0/1     Completed              0                 6d21h
      rook-ceph-tools-c758c4cf-5clzb                                    1/1     Running                0                 5d22h
      
      $ oc get installplans
      No resources found in openshift-storage namespace

       

      Expected results:
      No Csv missing, all pods running, all subscriptions and install plan shall present

      $ oc get csv
      NAME                                      DISPLAY                       VERSION           REPLACES                                  PHASE
      mcg-operator.v4.10.8                      NooBaa Operator               4.10.8            mcg-operator.v4.10.7                      Succeeded
      observability-operator.v0.0.15            Observability Operator        0.0.15            observability-operator.v0.0.15-rc         Succeeded
      ocs-operator.v4.10.7                      OpenShift Container Storage   4.10.7            ocs-operator.v4.10.5                      Succeeded
      ocs-osd-deployer.v2.0.10                  OCS OSD Deployer              2.0.10            ocs-osd-deployer.v2.0.9                   Succeeded
      odf-csi-addons-operator.v4.10.7           CSI Addons                    4.10.7            odf-csi-addons-operator.v4.10.5           Succeeded
      odf-operator.v4.10.7                      OpenShift Data Foundation     4.10.7            odf-operator.v4.10.5                      Succeeded
      ose-prometheus-operator.4.10.0            Prometheus Operator           4.10.0            ose-prometheus-operator.4.8.0             Succeeded
      route-monitor-operator.v0.1.451-3df1ed1   Route Monitor Operator        0.1.451-3df1ed1   route-monitor-operator.v0.1.450-6e98c37   Succeeded
      $ oc get pods
      NAME                                                              READY   STATUS      RESTARTS   AGE
      88a0658272c278a25a89cd5b3986546adf0d42df313337e12d332bc47bjfpnk   0/1     Completed   0          32h
      addon-ocs-provider-qe-catalog-kf2rl                               1/1     Running     0          32h
      alertmanager-managed-ocs-alertmanager-0                           2/2     Running     0          2d7h
      csi-addons-controller-manager-74678776bf-bvrbw                    2/2     Running     0          32h
      ocs-metrics-exporter-6c446f6584-5chv8                             1/1     Running     0          32h
      ocs-operator-65444668f-knzfq                                      1/1     Running     0          32h
      ocs-osd-aws-data-gather-7d4fc748c-7nr6t                           1/1     Running     0          32h
      ocs-osd-controller-manager-577b88bf8c-n9v5n                       3/3     Running     0          32h
      ocs-provider-server-cf67cf98-8drqc                                1/1     Running     0          32h
      odf-console-5d58fb588c-mr8r4                                      1/1     Running     0          32h
      odf-operator-controller-manager-6c8db59967-b9ct2                  2/2     Running     0          32h
      prometheus-managed-ocs-prometheus-0                               3/3     Running     0          2d7h
      prometheus-operator-8547cc9f89-cg54h                              1/1     Running     0          2d7h
      rook-ceph-crashcollector-ip-10-0-132-150.ec2.internal-696dg5nr2   1/1     Running     0          32h
      rook-ceph-crashcollector-ip-10-0-159-33.ec2.internal-67b549fg9x   1/1     Running     0          32h
      rook-ceph-crashcollector-ip-10-0-169-167.ec2.internal-7777r2srd   1/1     Running     0          32h
      rook-ceph-mds-ocs-storagecluster-cephfilesystem-a-cd87b965wg756   2/2     Running     0          32h
      rook-ceph-mds-ocs-storagecluster-cephfilesystem-b-9b748476sv6l7   2/2     Running     0          32h
      rook-ceph-mgr-a-7d97798bdf-v4grl                                  2/2     Running     0          62m
      rook-ceph-mon-a-545f8d8c4d-ktsx7                                  2/2     Running     0          32h
      rook-ceph-mon-b-694d68d8fc-vdgkt                                  2/2     Running     0          32h
      rook-ceph-mon-c-c596b8b78-msn6l                                   2/2     Running     0          32h
      rook-ceph-operator-5f84bbf87f-trpwv                               1/1     Running     0          32h
      rook-ceph-osd-0-7c777f44d6-d7h4h                                  2/2     Running     0          32h
      rook-ceph-osd-1-85b9d7b84f-8mscs                                  2/2     Running     0          32h
      rook-ceph-osd-2-584454dcd-pjzkf                                   2/2     Running     0          39m
      rook-ceph-osd-prepare-default-0-data-0s6jlt-v9g2l                 0/1     Completed   0          2d7h
      rook-ceph-osd-prepare-default-1-data-0xsrjc-wklrt                 0/1     Completed   0          2d7h
      rook-ceph-osd-prepare-default-2-data-07djjs-k42z6                 0/1     Completed   0          2d7h
      rook-ceph-tools-c758c4cf-5clzb                                    1/1     Running     0          32h
      $ oc get installplans.operators.coreos.com
      NAME            CSV                       APPROVAL    APPROVED
      install-x6bh7   odf-operator.v4.10.7      Automatic   true
      install-zwwsx   ocs-osd-deployer.v2.0.9   Automatic   true

       

       

       

      Additional info:

              pegoncal@redhat.com Per Goncalves da Silva
              rhn-sgatfane suchita gatfane (Inactive)
              Jian Zhang Jian Zhang
              Votes:
              0 Vote for this issue
              Watchers:
              4 Start watching this issue

                Created:
                Updated:
                Resolved: