Apex: Fixes promotion per Apex branch

Now that we branched for Gambia, we want Gambia code to handle promotion
for Queens snapshots, while Apex master is responsible for rocky/master
promotions.

Change-Id: I6f4fffabd728d72fe9b6b2e5a983f6d8762272a9
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Fix building for gambia

The logic should have been checking for stable/fraser and didn't account
for newer branches other than master.

Change-Id: I1164ce57338ba1734aa68c98bfe22a8a5f4209ac
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "[XCI] Add inventory to run prepare-tests.yml"

Merge "Correct the scenario error in container4nfv"

Merge "Add image extra properties for fuel installer in functest test"

Merge "[barometer] Add stable/gambia branch"

[barometer] Add stable/gambia branch

Change-Id: Icc8c518bda5240d814be9110b5d09b19c5868078
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Stable/gambia branch creation for SDNVPN project

Change-Id: Iaf668d3f496f7a5343e10e59ff2b7f9073c52f28
Signed-off-by: dimitris.tsiolakis <dmts@intracom-telecom.com>

Add image extra properties for fuel installer in functest test

With using scsi volume device type, additional image
extra_properties are needed.
Set environment variable IMAGE_PROPERTIES when installer is fuel for
functest test run.

Related to:
  https://gerrit.opnfv.org/gerrit/#/c/61913/
  https://gerrit.opnfv.org/gerrit/#/c/63225/

Change-Id: If35aa282abaf5dab1a5bacc2f26fe89292b09605
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

[XCI] Add inventory to run prepare-tests.yml

To pass functest healthcheck test in odl scenarios, some odl variables
must be fetched. To do so, we require to know where opendaylight is
deployed and that we can know using the dynamic_inventory.py file in OSA

This is needed for this patch:
https://gerrit.opnfv.org/gerrit/#/c/63175/

Change-Id: I04643ce93078bad53838e4d4e611f7684d4bd314
Signed-off-by: Manuel Buil <mbuil@suse.com>

Merge "Add Gambia stream for noop jobs"

Merge changes from topic 'yardstick-docker-gambia'

* changes:
  Enable yardstick-docker-build-arm-push-gambia job
  Make Gambia stream available to ARM Docker builds
  Enable yardstick-docker-build-push-gambia job

Merge "Configure functest daily  gambia jobs for fuel installer"

Enable yardstick-docker-build-arm-push-gambia job

Similar to https://gerrit.opnfv.org/gerrit/63177 (done for x86_64).
It replaces the yardstick-docker-build-arm-push-fraser job, for the
same reasons.

Depends on https://gerrit.opnfv.org/gerrit/63179

Change-Id: I482bc05d4c6d1316bfde799a44360decacb60a5e
Signed-off-by: Patrice Buriez <patrice.buriez@intel.com>

Make Gambia stream available to ARM Docker builds

Similar to https://gerrit.opnfv.org/gerrit/63047 (done for x86_64).

Change-Id: Ie61a11c60ce0fd7c724f308ecfdcca982ebdf3ec
Signed-off-by: Patrice Buriez <patrice.buriez@intel.com>

Enable yardstick-docker-build-push-gambia job

It replaces the yardstick-docker-build-push-fraser job, because the
logic in jjb/releng/opnfv-docker.sh L106-L119 has limited options for
docker image tags:
- 'latest', for git commits on master branch
- tag-name, for git tags
- 'stable' otherwise, i.e. for git commits on *any* stable branch.

This means we can have only one (stable) job building and pushing
docker images, in order to prevent the 'stable'-tagged image from
switching between fraser and gambia contents, depending on the stable
branch where the most recent change was cherry-picked and committed.

Unfortunately, disabling the yardstick-docker-build-push-fraser job
also means that further git tags on the stable/fraser branch will not
result anymore in building and pushing new docker images with the
intended tag-name and contents.

Change-Id: Ieec1cdc6230e4c000c159cd743c587561c788fc3
Signed-off-by: Patrice Buriez <patrice.buriez@intel.com>

Merge "RTD Builds for OVN4NFV"

Merge "Make the Gambia stream available to Docker builds"

Merge "Remove LaaS Container build for RabbitMQ"

Create Gambia Jobs for Yardstick 2/2

Add Gambia jobs for Yardstick daily.
Keep fraser jobs until Gambia 7.0.0 is released.

For fraser-tied PODs, use docker image tag 'ovp-2.0.0'.

Change-Id: I6dca72807db1caf9adfc5ce5949c50ad70af5361
Signed-off-by: jenkins-ci <jenkins-opnfv-ci@opnfv.org>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>
Signed-off-by: rexlee8776 <limingjiang@huawei.com>
Signed-off-by: Patrice Buriez <patrice.buriez@intel.com>

Create Gambia Jobs for Yardstick 1/2

Add Gambia jobs for Yardstick gate:
- yardstick-verify-gambia
- yardstick-merge-gambia
Keep fraser jobs until Gambia 7.0.0 is released.

Gambia jobs for Yardstick daily will be added in next patch.

Change-Id: Id02bcb8197dd1f6d0b8f5baddef684a97e269a14
Signed-off-by: jenkins-ci <jenkins-opnfv-ci@opnfv.org>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>
Signed-off-by: rexlee8776 <limingjiang@huawei.com>
Signed-off-by: Patrice Buriez <patrice.buriez@intel.com>

CPERF: Disable CSIT IPv6 suite

This suite is failing with disconnects for the SSH connection to the
overcloud controller. Disabling it for now until we can figure out what
the problem is. Only happens in this suite:
https://build.opnfv.org/ci/job/cperf-apex-csit-master/104/consoleFull

Change-Id: I15eda3009f181c190bcef6e51b00d22070d9e444
Signed-off-by: Tim Rozet <trozet@redhat.com>

Configure functest daily  gambia jobs for fuel installer

Add fuel CI PODs and armband CI PODs for gambia stream
in functest-daily jobs

Change-Id: I5d3405a8c8d19dd472738fdddb03fe09bc61df2e
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

RTD Builds for OVN4NFV

This adds verify and merge jobs for building and publishing the OVN4NFV
documentation to ReadTheDocs (RTD).

Change-Id: Ifb97b3978150d923ef4728e7423b2c02d44978e4
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

CPERF: Move L3VPN ipv6 CSIT suite to be first

Pulling an older version of CSIT had no effect, so reverting that
change. Move L3VPN IPv6 CSIT suite to be first, to rule out a timing
issues along the suites, and determine if the problem with the socket
error is specifically somethign to do with this suite.

Change-Id: If523c6102283d00ae0deb1e96e3f89455be7472a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Fix broken L3VPN tests

L3VPN IPv6 tests fail consistently. This patch checks out a version of
CSIT right before an update was done to all the L3VPN test. This patch
will be used to validate if the bug was introduced by that commit, and
reverted either way.

Change-Id: I2998cc7cfae183048e5ff1d06fd6bcdf16dd8e41
Signed-off-by: Tim Rozet <trozet@redhat.com>

[opnfvdocs] verify: Relax changed files pattern

Some changes alter the docs yet still don't trigger the verify job
due to the pattern being too restrictive.

Change-Id: I775bfdce5e31a4334d21da10ff3072268b2b6155
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Remove LaaS Container build for RabbitMQ

LaaS is using the upstream rabbitmq container now, so there is no need
for this build.

Change-Id: I08d2dc07eb6cd9cc732b25fd6dee2f342117d857
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Use Dovetail ovp-2.0.0 docker image for fraser jobs

Change-Id: Ied4eb884b9e61a43d21a87f9cf645b89d043d3a6
Signed-off-by: xudan <xudan16@huawei.com>

Correct the scenario error in container4nfv

Correct the scenario error in container4nfv for
functest-k8s.

Change-Id: I7a24508ae35c44baa22f1fab8b1a72388dedf0b0
Signed-off-by: Jingzhao Ni <jingzhao.ni@arm.com>

Make the Gambia stream available to Docker builds

Change-Id: Iac803fe18e6c1fcfcefb61dfb7ea03cbed5a51d1
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Add Gambia stream for noop jobs

Change-Id: Icb84e4860021f5aa24de0d68542863da7fee4aff
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Apex: Add ovn scenarios

Includes a minor fix to ipv6 rocky scenario.

Change-Id: I55440dff2fcf7674d4a9c86d9dcb131c226e68ea
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Create Stable Branch Jobs for sfc"

Apex: Fixes branch checking

With the move to upstream artifacts post-fraser the checks to use
upstream artifacts were relying on BRANCH == 'master'. This doesn't
scale as we preserve fraser functionality but add more branches like
gambia. Therefore inversing the logic to accomodate for new branches.

Change-Id: Ice17f6afd33744f44d253d320a194c3f6d02d8bf
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Apex: Add Gambia jobs and prepare for rocky"

Merge "Add docs build jobs for stor4nfv"

Apex: Add Gambia jobs and prepare for rocky

Adds Gambia daily/verify jobs and prepares to migrate master queens
scenarios to rocky scenarios.

Change-Id: I7bfe6202e00fd62c1e668f3a6f9b481b9fbca99d
Signed-off-by: Tim Rozet <trozet@redhat.com>

[fuel, armband] Switch CI jobs to gambia

- keep fraser jobs for Dovetail, schedule 4 CI runs / week / arch;
- stop running Functest/Yardstick for fraser to cut down CI time;
- reschedule master/gambia triggers to ensure an uniform CI POD
  allocation across the week;
- enable gambia triggers;

Change-Id: I2a66628ff3525cc9cbd4ffbb4b790633257b6cba
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "Apex: Branch for gambia"

Apex: Branch for gambia

Change-Id: I4280286aac855f3fcab5a72aa82e6f8087bbb63e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "modules.opnfv: fuel adapter: Switch to MCP"

Merge "[fuel] Schedule odl-sfc-noha scenario"

Merge "Increase functest job timeout"

Add docs build jobs for stor4nfv

Change-Id: I432061b472c22dfd65821f8aeaf9c0c5671f3759
Signed-off-by: Sofia Wallin <sofia.wallin@ericsson.com>

[fuel] build, deploy: Run as regular user

Change-Id: I70f8e7c9372e22e6f3e357b48a0a49f44a4d9078
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel] Schedule odl-sfc-noha scenario

Change-Id: Ic1430742e98dd0e98ea3456c636a910c22a90e88
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>

Increase functest job timeout

Functest job timeout is not enough
Functest jobs are aborted after 480 min

Change-Id: I74dfe12b08e322aad53e10d5808b5b739b8d9ce2
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

modules.opnfv: fuel adapter: Switch to MCP

The current codebase was intended for Fuel@OPNFV up to and including
the Danube release (based on Fuel@Openstack).
Starting with the Euphrates release, Fuel@OPNFV is based on Mirantis
Cloud Platform (MCP), so the Fuel adapter in modules.opnfv needs a
rework to accomodate the new platform:
- remove unused obsolete code in opnfv.utils;
- switch to key-based SSH auth instead of password-based;
- drop proxy-ing SSH to cluster nodes via installer node, instead
  SSH directly via PXE/admin network;

Notes:
- MaaS node (when present) is marked with 'installer' role to prevent
  ovs-vsctl queries on it;
- gtw01 node (when present) is not marked with any role yet;

JIRA: FUEL-394

Change-Id: If2b7744b950cd502df8eaca0137c9f845a9d077d
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "Pharos Dashboard Container Builds"

Merge "[docs] Limit git submodule recurse to depth 1"

openci: Run jobs on xci slaves

Change-Id: I58fc2c56d32c04f2c96136ed69335b5c64771e05
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Fix Functest return values"

Merge "Add scenario parameter for functest-k8s in container4nfv Proj"

Merge "container4nfv: adjust arm job timeout"

Pharos Dashboard Container Builds

Adds jobs for building the following LaaS containers:

 - opnfv/pharos-tools-laas-dashboard
 - opnfv/pharos-tools-laas-celery
 - opnfv/pharos-tools-laas-mq

Having these containers built seperately from docker-compose decouples
the build and deployment phases for the dashboard.

Change-Id: I919066f5defd02fe1bbf96cfdf8ec2a6b3d8757d
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Create Stable Branch Jobs for sfc

Change-Id: Idea9af88bd02f647addec9142e0384dc6cf2029a
Signed-off-by: jenkins-ci <jenkins-opnfv-ci@opnfv.org>

Merge "Fill stable branch details"

Merge "Create stable/gambia branch for Auto project"

Merge "Create stable/gambia Branch for Compass4nfv repos"

Merge "Gambia Stable Branch for IPv6"

Merge "Doctor stable/gambia and opnfv-7.0.0"

Create stable/gambia branch for Auto project

Change-Id: Ic5e0a004422264fb91f27b1d1152518ef7b159b3
Signed-off-by: Martin Klozik <martin.klozik@tieto.com>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "[samplevnf] Add stable/gambia branch"

macros, docs, releng: Use `sudo -H` pip install

This is still far from a clean and secure approach, as `pip install`
should not be ran with `sudo`.
However, `-H` limits the area we touch and also fixes some incompat
between disto-provided pip and pip-provided pip.

Change-Id: I0e19dfeaf66f6f453e3868c71016305ae050f0c8
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

openci: Fix the event origin in compose job

Change-Id: I450bbd4a3c0e386f949b3b06fe85e74661e2ef2b
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

[samplevnf] Add stable/gambia branch

Change-Id: I3f3b0b150defb12553740f0d4c3ec111fceb7a5b
Signed-off-by: Deepak S <deepak.s@linux.intel.com>

Fill stable branch details

Change-Id: I135189c6fa8fbf01f67f37547ca120779c08fbc9
Signed-off-by: Manuel Buil <mbuil@suse.com>

Fix Functest return values

The current impl doesn't exit as expected when running both tiers and
testcases [1][2].

[1] https://build.opnfv.org/ci/view/functest/job/functest-apex-baremetal-daily-master/324/console
[2] https://build.opnfv.org/ci/view/functest/job/functest-apex-baremetal-daily-fraser/284/console

Change-Id: I934c3f54313522011ed87ebebe77fbb285b8ab49
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

[fuel] verify: Rework condition for using sudo

With the rework of Fuel & Armband repos, the condition for using sudo
got mixed up and alternated between on/off for armband's deploy/verify
jobs. Rewrite it based on lab allocation instead of project.

Change-Id: I428c585142017b170233858ec3160fdaf998db0c
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Gambia Stable Branch for IPv6

Change-Id: Ife7a1fe2feddc54b980e702733d829998f9e02e3
Signed-off-by: BIN HU <bh526r@att.com>

[yardstick] Add stable/gambia branch

Change-Id: I2f3b0b150cefb12553740f0d4c3ec111fceb7a5b
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

[fuel] verify: Use regex find instead of match

==~ and its negative form previously used mean the pattern should
match the whole string, while =~ returns true for partial matches.

Change-Id: Ibdeacb4bc221820175b15a87db343fc950e0f9e8
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel] verify: pass env vars with sudo -E

While at it, tweak regex for verify job to match 'recheck' right
before EOF.

Change-Id: I3e8e1eeaf2ca947425fa2443b29e150c808eea07
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "For compass, the process name is rabbitmq"

[fuel] verify: Enable voting for arm64 deploy

- disable functest smoke on arm-virtual* PODs, since we don't perform
  a full deployment on those PODs, only a basic integrity check;

Change-Id: I0bcd6da32118ea256652dc74977ef0ee7f2525ab
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel] verify: Add baremetal testing on request

Duplicate fuel-verify jobs based on cluster type (virtual, baremetal)
and allow (re)checking changes using a specific scenario:
- ALL changes will trigger a virtual POD CI cycle (build, deploy,
  smoke) on submit, rebase etc., just like they used to;
- change comments containing a substring formatted like:
  * `recheck: os-odl-nofeature-ha`
  * `reverify: os-odl-nofeature-noha`
  * `recheck`
  will trigger only virtual or baremetal deployments of the required
  scenario (default os-nosdn-nofeature-noha) on:
  * virtual   PODs if scenario is NOHA;
  * baremetal PODs if scenario is HA;
- limit arm64 verify job running on arm-virtual2 to the installation
  of infrastructure VMs and skip cluster setup to prevent POD time
  starvation;

Limitations:
- HA scenarios can only be verified on manual request via a change
  comment (e.g. 'recheck: os-odl-ovs-ha');

JIRA: FUEL-390

Change-Id: I6368cfd045180d6a7202b8d817b17a4b123ba2af
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Create stable/gambia Branch for Compass4nfv repos

Change-Id: I97e1f9d0909f72c13b2fb8f80bfe10f34c054d11
Signed-off-by: Harry Huang <huangxiangyu5@huawei.com>

openci: Log eventBody to console before publishing

It is necessary to log the eventBody to console before we attempt
to publish it since it is not possible to see the event body in
case if the publisher errors out due to invalid JSON.

Change-Id: I79cb93f64f5e6e275e306b375210f5f2ed7bd53d
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "openci: Fix jsonBody for the published event"

Merge "openci: Switch to python utility for publishing messages"

openci: Fix jsonBody for the published event

Change-Id: I9bdcbf24573bb2202e8ec3c43b3cdfc2ba7df321
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Doctor stable/gambia and opnfv-7.0.0

Doctor Gambia release

Change-Id: Idf90b116d3e697947b3e9a60163243bff79cf181
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

[dovetail] add fraser docker build job

Change-Id: Ic54f6fe21dc0e9d2b3a9a2f3db1ba82f08446b6c
Signed-off-by: xudan <xudan16@huawei.com>

Merge changes from topic 'stable-branch'

* changes:
  [armband] verify: Simplify and move to build hosts
  [fuel] Retire Danube stream
  [fuel] cleanup: remove unused scenarios
  [fuel] cleanup: remove unused job defs & scripts

Merge "[stable/gambia] fuel, armband stable branches"

Merge "Clean up RETURN rule from FORWARD chain"

[armband] verify: Simplify and move to build hosts

Now that Fuel verify jobs cover arm64 deployments by default, we
only need to validate that the Armband patches still apply on top
of the latest Fuel@OPNFV git submodule HEAD.

While at it, tweak timed trigger order.

JIRA: ARMBAND-401

Change-Id: I4ed20b52906848efff6bad641852d3dd1bee3db3
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

openci: Switch to python utility for publishing messages

Change-Id: Iee41f1fcaf80f0a0b3a58cd189a04cefcbfbb028
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

openci: Configure jobs to run on ericsson-build4

lf-build2 seems not to have right ports open, causing problems while
connecting to ActiveMQ Message Broker.

https://build.opnfv.org/ci/view/OpenCI/job/openci-opnfv-k8-nosdn-onap-ha-compose-daily-master/10/console

Change-Id: If78cb8b2748080641db851182860f6a8630a323d
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Add scenario to publisher and filter

Change-Id: I52d4ecb5f305f190a9e06c13407fd0927bc45a29
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>

Change test job to use new publisher

Change-Id: I9da4c2587874a7ea4ca0f2b90dd7ec15c9e05e34
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>

Remove injecting properties, fix in openci_publish call

Also remove the jms publisher, this is not going
to be used now, as the openci_publisher will be
used instead.

Change-Id: I9a3f4557724cc41ac85ce68a6d0c46ae78864b88
Signed-off-by: Yolanda Robla Mota <yroblamo@redhat.com>

Use credentials for openci job

Change-Id: Ie25586d8ef73a34b68fdf5580df27e5e609e84ce
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>

Merge "Add missing PS1 var"

Add missing PS1 var

Change-Id: I0d6b8525cc12bb71852a8aeeb67cbc37d0456bcb
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>

Merge "Add fixes in openci job"

Add fixes in openci job

Force workspace cleanup
Do not use credentials plugin, but hardcode it.

Change-Id: I5b6e59382c25fc75a748f90fbd030521dac9071f
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>

Merge "Use publisher in OPNFV compose daily jobs"

Use publisher in OPNFV compose daily jobs

Change-Id: I2341191b9afbf7b572a6ae28a50eb722b66109c7
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>