Merge "Clean Functest containers even if failure"

Clean Functest containers even if failure

It creates an additional multijob to ensure all containers are removed.
It also publishes logs via gsutil.

Change-Id: I45bd8aec3569e3257b94ea978c5bf2fd703649be
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "mcelog not longer supported on ubuntu 18.04"

Disable vnf testing in daily gates

heat_ims sometimes fails.
It mainly eases saving time when developping the workflow.

Change-Id: I230461a3bae508bf60771df3f01a8271a2735065
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Fix latest tag in functest-virtual.yaml

Change-Id: If3df5a002db5157dea423f3acac6c47b78d9b4ad
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Avoid possible deadblocks in Functest jjbs

From the time being, only 2 executors are allowed and then it may lead
to deadblocks if two multijobs are executed.

Normally we should only forbid gate and daily jobs at the time (tags are hardcoded).

It reverts to new patchset triggers as on core approval is buggy.

Daily jobs are now triggered once a day.

Change-Id: Iaa1ae73f8baeed037dd2f20f05ec3b15d1643b3b
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Gate Functest tests when +2

It will update to Workflow as soon as possible.

Change-Id: Id12afa6836b4cc0129666480eb92c36132c32823
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Add check mode in Functest jjbs

It allows checking one specific change on LF resources.
It completes the two modes already defined: daily and gate.

Change-Id: I7ccadf1ef07533bb549ee365b4f3deedd3d457fe
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Perform a second Mock tag

tagging the sandbox project a second time to verify release automation is working as
intended.

Change-Id: Ib03db24d09b7fa28dd1f3893337b8670886e5686
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Perform a Mock tag

tagging the sandbox project to verify release automation is working as
intended.

Change-Id: Iba5a8e8d612c9a7fb50db41cb5e46777901e70ad
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Rework creating tags & branches from release files

Old method could not properly handle both branching and
tagging on changes to the release file.

Proposed method:
jjb calls:
jjb/releng/branch-or-tag.sh
for both verify and merge jobs.

branch-or-tag determins nature of the change to
"releases/branch/project.yaml"
and calls
 releng-release-tagging.sh
or
 releng-release-create-branch.sh

The scripts above handle both verify and merge operations

based on
  if [[ $TAG_EXISTS = false && "$JOB_NAME" =~ "merge" ]];
and
  if [[ $REF_EXISTS = true && "$JOB_NAME" =~ "merge" ]]; then

both scripts check that the ref exits in verfiy and merge stages.

if releng-release-create-branch.sh creates a branch it then also
calls releases/scripts/create_jobs.py

Change-Id: Ieb99de5e4df100af59ecc818f52b0831383b2b62
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Merge "Add triggers to verify Functest"

Add triggers to verify Functest

It runs testcases for all new patchset.

Change-Id: Ida99e2f40cf3a7a6bc002e81cee27eb67ea62ff0
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "[fuel] docker build: Add blocking jobs"

[fuel] docker build: Add blocking jobs

Prevent master & stable streams to trigger concurrent builds on the
same node, which usually leads to one of the jobs failing to acquire
the DPDK lock on the build server.

Change-Id: I1f61f1a2eb10eb9373a75b31c74f5d6de60f5334
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel] docker build: Add CACHE_INVALIDATE

JIRA: FUEL-398

Change-Id: Ie490ec0841dae9748b35fa716e8b9fc0cd0aff63
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Adding promotion of alex

This is actually to test somethign in our
internal jenkins it can be ignored

Change-Id: I6d6bd1e53280f2f6431ee901c517bb6316dd934a
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

mcelog not longer supported on ubuntu 18.04

I belive that barometer needs mce log and will need to find another way
of using it.

https://bugs.launchpad.net/ubuntu/+source/mcelog/+bug/1752251

Change-Id: I798f3052710a276c49d562b61661c2edf719d88b
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Merge "Bug: Doctor all does not work"

Merge "Remove '|' from ovn4nfv plugin unit test builder"

Merge "Adding a new verification job for testapi UI."

Bug: Doctor all does not work

Change-Id: I3654c125192686348c59cd14e0de562e1043011e
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

Apex: Fixes unset var checks

Var checks for unset required proper parameter expansion to avoid
nounset.

Change-Id: Ide5db47e2243c8aee0f97369bf3cd0673e7f4bd3
Signed-off-by: Tim Rozet <trozet@redhat.com>

Remove '|' from ovn4nfv plugin unit test builder

Because of the '|' character JJB thinks '!include-raw:...' should be
executed literally, instead of including the file as the shell script.

Change-Id: I753dec4b496bd7d9a43c7c5aced17dfb9005f251
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Promote Alexandru Avadanii to Releng Committer

Alex has been an active contributor and reviewer to Releng since 2016 maintaing
the Armband and Fuel jobs. And as the PTL of Fuel he should be granted
committer rights.

Change-Id: I5ee698440d2a5d7f0cfee31b83ad40c92702b838
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Apex: Fix OS_VERSION detection"

Merge "Promote Cédric Ollivier to Committer on Releng"

Merge "Fix a nit in functest-virtual.yaml"

Apex: Fix OS_VERSION detection

When we run deployments for snapshot creation we typically pass in the
OS_VERSION var so we know what openstack version we are deploying with.
However when we run a verify/gate job to ensure that the snapshot
deploys work we do not have this variable, and need to detect it based
on the OPNFV branch, or if the branch is master, the deploy scenario
naming scheme.

Change-Id: If1445dc564d2af59b9740391de56b821b78de0b5
Signed-off-by: Tim Rozet <trozet@redhat.com>

Fix a nit in functest-virtual.yaml

Change-Id: I993bac8545d896d1ead25c5f33c9645c52c5d208
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "Apex: Refactor snapshot pipeline for other types"

Fix functest-virtual (sudo + current dirs)

It completes the previous commit [1] pulling all images.

[1] https://gerrit.opnfv.org/gerrit/#/c/65203/

Change-Id: Id32aabf107064689a38d5ffb719ba5023c40296d
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Pull all containers before running tests

Else we might test previous containers.

Change-Id: I53b98f99f7fe5db8ea2087c93cfc58a03103db9e
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Enable vnf testing when gating Functest

It adds rally_sanity and vnfs.
From the time being, only rally_full is excluded (all-in-one).

Change-Id: I451d1503a0a1633f4e3e68ed272742981f04eb36
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Apex: Refactor snapshot pipeline for other types

This patch changes snapshot related scripts to allow for more than just
the current snapshot type of "csit". This allows us to add other
snapshot types, including the functest type. The same
snapshot.properties file will be used to store information for all types
of snapshots. The snap cache folder structure will remain the same, but
hold different types of snapshots in the same folders.

These changes include renaming the URLs for the snapshot artifacts to
reflect the snapshot type, but remains backwards compatible until enough
promotions have occurred and other apex snapshot deployment scripts have
been migrated to the new format.

Change-Id: If3e47e700b5ad9c95418179042b85814fe389233
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Tagging SampleVNF stable/gambia branch for Gambia 7.0.0"

Add Promise gambia rtd job

Change-Id: I122523925a022efe04040a021deebb257109132c
Signed-off-by: Bertrand Souville <souville@docomolab-euro.com>

Tagging SampleVNF stable/gambia branch for Gambia 7.0.0

Change-Id: I6312e57c689519bdf65a562db85acfb443ac6c68
Signed-off-by: Deepak S <deepak.s@linux.intel.com>

Merge "Add Clover gambia rtd job"

Replace ovn4nfv-k8s-plugins for ovn4nfv-k8s-plugin

The ovn4nfv-k8s-plugin was named differently in github.com/opnfv
as consequence its jenkins job was created using that wrong name.
This change fix the name of the project.

Change-Id: I5e17e65613578fb3011f0e7a121933e4e1c4ce8c
Signed-off-by: Victor Morales <victor.morales@intel.com>

Create docker jobs for gambia

Change-Id: Ifdba9b1964010f4c1e7ca0355a1ad35a217b3518
Signed-off-by: TsaLaGi <aasmith@redhat.com>

Merge "Enable ovn4nfv-k8s-plugins project jobs"

Protect vs build-args not consumed

BRANCH is useless in case of components which only inherits from tempest.
The build could simply fail depending on the docker version [1].

[1] https://build.opnfv.org/ci/job/opnfv-functest-components-latest-build/1/console

Change-Id: I8ced7282c77463de9684904d141b2f18ae45d3c9
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Publish Functest gate job

It mainly conforms with the first jjbs published in functest.
It only differs regarding the numbers of multijobs (limited to 1
in releng) and the branch management.

From the time being, rally-based testcases and vnfs are excluded
to avoid falsy false.

The next patch will update the gerrit trigger part.

Change-Id: Ie1d2acbd9c4f2ad41ecd4cc43d0c13f855251349
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Enable ovn4nfv-k8s-plugins project jobs

Change-Id: Ib61a1be6746fc67eddc0766e87837ff5d34cfe34
Signed-off-by: Victor Morales <victor.morales@intel.com>

Add Clover gambia rtd job

- The docs aren't rebuilding for Clover on stable/gambia
- Assumption here is that this will remedy

Change-Id: I3310cd1c2edc5418704957bd348d1fd21c4a9dd6
Signed-off-by: Eddie Arrage <eddie.arrage@huawei.com>

Add ARM Gambia for StorPerf

Change-Id: I356944c2b59476f2aa1a7a07d4f326d3fd2a224e
Signed-off-by: mbeierl <mark.beierl@dell.com>

Merge "StorPerf Gambia Containers"

Verify Functest on functest-virtual

It runs most of healthcheck and tempest-based test cases as a first
step. All benchmarking tools and all vnfs are not executed yet.

All active Functest versions are verified thanks to backward
compatibility ensured by Tempest and then by Functest.

The jobs are designed to be run in parallel (we could also run all
Functest versions in parallel instead of separated steps).

It will be switched to a verify gate in a second step.

Change-Id: I07cada848dd90f70da8741269692de8646813bdb
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

StorPerf Gambia Containers

Create jobs for building StorPerf's Gambia containers.

Change-Id: I0cab4a3df10edc137d652ddddfe43ac4860e5c35
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Clover release opnfv-7.0.0 (Gambia)

Change-Id: I9e155bfedf377ee51364972c8c7ca79cbe1aeebf
Signed-off-by: Stephen Wong <stephen.kf.wong@gmail.com>

Merge "Run Doctor apex sample with all test cases"

Merge "Create Stable Branch Jobs for nfvbench"

Merge "Yardstick release 7.0.0 of Gambia"

Create Stable Branch Jobs for nfvbench

Change-Id: I1f11b45d22e0af40549831cf65d5a23c2d8ee8fc
Signed-off-by: jenkins-ci <jenkins-opnfv-ci@opnfv.org>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Release notes added for sfc"

Merge "[opnfv-7.0.0] Fuel, Armband release"

Merge "Disable Jobs Set to Run on 'joid-virtual'"

Yardstick release 7.0.0 of Gambia

Change-Id: Ic5b0ebe6bbdb31181e7a8e847b92915dbb8b431b
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

Add branch for gambia

Change-Id: Ib252ca0e5edb2efb5b85fb60c8b83de7704113e5
Signed-off-by: ahothan <ahothan@cisco.com>

[opnfv-7.0.0] Fuel, Armband release

Change-Id: I961f1aa0fbf22b219acb33806a78af99ca889dcb
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Release notes added for sfc

Change-Id: Ia0b28e0051fa4c914e1fa4f31a8f1633aab1fb08
Signed-off-by: Manuel Buil <mbuil@suse.com>

Merge "Move Barometer Builds to lf-build2"

Disable Jobs Set to Run on 'joid-virtual'

Since there are no longer any nodes labeled 'joid-virtual', jobs set to
run on joid-virtual are disabled until another virtual host is added for
JOID.

Change-Id: Ibe9eca5f094d08ccb5260e7e28b24f5e867a8c29
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Move Barometer Builds to lf-build2

Adds specific parameter for 'lf-build2' so it can be referenced with
the '{build-server}-defaults' syntax and assigns barometer verify and
merge jobs to lf-build2.

Change-Id: If68dfc4e6ea81884870047360051795407c15af3
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

RTD: Enable Gambia stream

Enable Gambia read the docs stream for all projects that have
a gambia branch

Also added edgecloud rtd job as it was missing

Change-Id: I64d159cde0200871cd4ba3d2c071853c9bd502c1
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Merge "[dovetail] remove the stream check for fuel"

Merge "[ipv6] Enable Voting for Documentation Builds"

Merge "[daisy] Enable voting for documentation builds"

Merge "[stor4nfv] Enable voting for docs verify job"

Merge "Install Collectd on CentOS Build Servers"

Merge "Sort CentOS build server package to be installed"

[fuel, armband] RTD: Enable Gambia stream

Change-Id: I97631f1d4902f8b8d3c2de8c4b086ffbad40a0f2
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[ipv6] Enable Voting for Documentation Builds

'tox -e docs' exists and is working for ipv6, and removing
'gerrit-skip-vote' will make the job start voting on new patchsets.

Change-Id: I6d6eb09752664976214af13f090d7eab6106657c
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

[daisy] Enable voting for documentation builds

Changes to daisy's 'docs/' directory will set -1/+1 verification
depending on whether or not the docs build without error.

Change-Id: I1f74c41cb02769d1ab114918d400d9d7afd2a8c3
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

[dovetail] remove the stream check for fuel

Now it set that only running Dovetail jobs on Fuel fraser.
Remove the check item.
The mandatory test cases will run on all ha scenarios.
The optional test cases only need to run twice a week on ha scenarios
to save the time.

Change-Id: I7f7dd93440bb40e7bc9964fd744bb002ef88f77b
Signed-off-by: xudan <xudan16@huawei.com>

[stor4nfv] Enable voting for docs verify job

Change-Id: Iafcc1dfdf331cec67545abdb3bfc863312dea49f
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Install Collectd on CentOS Build Servers

Collectd is needed by the barometer project as it contains several
libraries they link against including dpdkevents.

Change-Id: I43ce41b7116e168a0211c795b17a5a40ee585930
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Sort CentOS build server package to be installed

Sorts the package list alphabetically so its quicker to read which
packages are installed.

Change-Id: I784cfa773aed226301017d5ea64f0485e60c1c4e
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Enable Promise Documentation Verification

As the tox file and 'docs' env now exists, the promise rtd job can start
voting.

Change-Id: I113bf4b4ef58a4c3339242a1542780cac85fffb5
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Only trigger docs-verify-rtd-master for opnfvdocs

also remove hacky logic that deletes opnfvdocs clone and then
clones project

Change-Id: I4c0687af6d31b6759e0f6ccf275d968b9d71a7d9
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Merge "Create Stable Branch Jobs for container4nfv"

Create Stable Branch Jobs for container4nfv

Change-Id: Icc0999a5f9dcb2052dc34e21c8de754e9aec0909
Signed-off-by: jenkins-ci <jenkins-opnfv-ci@opnfv.org>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Create stable gambia branch for container4nfv"

Merge "Gambia Stable branch for Availability project"

Merge "Create Gambia branch for Edge Cloud Project"

Merge "Create Stable Branch Jobs for vswitchperf"

Create Gambia branch for Edge Cloud Project

Creation of the Gambia stable branch for the edge cloud project

JIRA: EDGE-1

Change-Id: I87c787a5abfc82f6e71c55fb1593836dd86ef2c8
Signed-off-by: fuqiao@chinamobile.com
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Create stable gambia branch for container4nfv

Change-Id: Ifb9649f17c951af36a7519cb6d8e07f633280763
Signed-off-by: Xuan Jia <jason.jiaxuan@gmail.com>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Gambia Stable branch for Availability project

Creating the Gambia stable branch for availability

JIRA: HA-32

Change-Id: Ie697ba88703f13a3447084340ee06d934fe51cc9
Signed-off-by:fuqiao@chinamobile.com
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Create Stable Branch Jobs for vswitchperf

Change-Id: I0918448fc96f49d51a2657bad5538ce9e6af990c
Signed-off-by: jenkins-ci <jenkins-opnfv-ci@opnfv.org>

Merge "VSPERF: Gambila Stable Branch"

Merge "[dovetail] add gambia jobs"

Merge "Adding Doctor opnfv-7.0.1 tag"

Fuel RTD job was missed

Adding it back, I removed it from fuel-project-jobs
and forgot to add it back as its own file

Change-Id: I9d84a979cd5323d72ec858b310cb1b786c5f1207
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Adding Doctor opnfv-7.0.1 tag

Change-Id: Iaf0ff80c5716aa2051c04b0241a2d19d1709f0f1
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

VSPERF: Gambila Stable Branch

Change-Id: I2bff1e3e549cf3afbbb295f2959dc8f983c3ee9b
Signed-off-by: Sridhar K. N. Rao <sridhar.rao@spirent.com>

[dovetail] add gambia jobs

Change-Id: I84e29a6d1ffaed59b2490f4c2e417c0456eb2ca7
Signed-off-by: xudan <xudan16@huawei.com>

Update Global JJB to v0.26.1

Release notes:
https://docs.releng.linuxfoundation.org/projects/global-jjb/en/latest/release-notes.html#v0-26-1

XMLDIFF: https://hastebin.com/abojibiguh.bash

Change-Id: I3e9c50c5efee331b7f05ecebb8bfe7e554a95f68
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Fix SFC Verify Job Virtualenv Location

'/var/cache' isn't writable by others, but /var/tmp should be.

Also fixed the issue of not sourcing 'activate' within the bin path.

Change-Id: Ib7830cc33543227d6b67cac00edc212d889aec10
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>