Use publisher in OPNFV compose daily jobs

Change-Id: I2341191b9afbf7b572a6ae28a50eb722b66109c7
Signed-off-by: Yolanda Robla <yroblamo@redhat.com>

Merge "[fuel] Accept arm clusters as valid deploy targets"

Merge "Add former testcase names as cases"

Merge "xci: Switch to Functest Hunter"

xci: Switch to Functest Hunter

Change-Id: I09978a08d00c561f17ce3a7d5ba75d80aa49a0f6
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Add former testcase names as cases

Else Fraser jobs are wrong [1]

[1] https://build.opnfv.org/ci/view/functest/job/functest-compass-baremetal-daily-fraser/lastFailedBuild/console

Change-Id: I4b3e1cacb9da3a3c51ec5b1be615bd2049b6a6e7
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Revert "fuel-deploy: Add temporary iptables rule"

This reverts commit b4a65c5e6777a53be5ea817c967caeee51285a7f.
Chain of DOCKER-ISOLATION already has required rule.

Change-Id: Ic7d3e93a2814a42764b4822ef96e0841f68b774d
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>

Fix Functest release refs

Change-Id: Ibc67e69c12a1e8c28700d05b5c055681a45ef536
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "Add functest-k8 job for arm platform"

[fuel] Accept arm clusters as valid deploy targets

JIRA: ARMBAND-401

Change-Id: Icd32874ecb38c3f7469e71bd461794b65f50494c
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel] verify: Align build/deploy docker img tags

Docker build automatically appends 'amd64-<TAG>' or 'arm64-<TAG>',
which are normally combined using manifest tool. However, for verify
we don't push a manifest, so use the explicit arch-specific tag.

Change-Id: Idc036216919164e71d3da5032a79f7f47d115710
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel] verify: Fix project, branch undef refs

Change-Id: I6b641c87e2672a9e879865baebfa3a58129823f7
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "Assign yardstick/barometer to ericsson-build4"

Merge "[fuel] verify: Multiarch, docker build step"

Merge "xci: Enable triggers for daily jobs"

Merge "Add Doctor maintenance job"

Merge "Update Functest jobs to manage new branches"

Merge changes from topic 'stable-branch'

* changes:
  Create Gambia and Hunter Release Jobs
  Create stable/hunter Branch for Functest repos

Merge "Create stable/gambia Branch for Functest repos"

Merge "Add build "yardstick-image-k8s" docker image job"

Assign yardstick/barometer to ericsson-build4

This is a temporary fix until we can determine the full list of
requirements from each project needed for the opnfv-build-ubuntu labled
servers.

Previously these were building fine on ericsson-build4, so reassigning
them there should keep there builds green.

Change-Id: I767b6faa718cd6dd4b9fd17f83e7ee817cfb8c4d
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Updated calipso scenario for master"

Updated calipso scenario for master

Change-Id: I22c05b0cb2973e84b6352a0ab4e7e38132e909f9
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update Functest jobs to manage new branches

It manages stable/gambia and stable/hunter as well.

Change-Id: Ib259995f8f0e45767a51204c4eb6fd239e66ed92
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Create Gambia and Hunter Release Jobs

This will create the release jobs needed for the OPNFV Gambia
and Hunter stable-stream release process.

Change-Id: Icdb9a337dcbad26fccb0e1e2935f8082f17bb220
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Create stable/hunter Branch for Functest repos

Change-Id: I99d60abfad4b90988d3188378fec84556be430e0
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Create stable/gambia Branch for Functest repos

Change-Id: Ib5c1c4435baa1a98907f08869c399f1f21f3e43c
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Add build "yardstick-image-k8s" docker image job

JIRA: RELENG-408

Change-Id: Ie6ac842ebd1bb6264c88a7f8ee0446d76fc3dbdd
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

Merge "Add the docs build job for fuel project"

[fuel] verify: Multiarch, docker build step

Rework Fuel verify jobs:
- split 'fuel-verify' into per-arch jobs (amd64 and arm64):
  * for now, arm64 jobs are non-voting;
- add 'docker-build' phase job:
  * the docker build job will run on the same virtual POD jump host
    as the deploy, to bypass the need of pushing to a (public)
    Docker hub registry - this might be refactored later to resemble
    the old Fuel ISO build workflow where the artifacts built during
    verify are the ones actually promoted - with the current method
    the final build & tag (ran on OPNCI CI build servers) might yield
    different results due to different docker build cache states;
  * the locally built container image is tagged with the 'verify'
    designator and not pushed to a public registry, only consumed
    during verify's job 'deploy-virtual' phase;

JIRA: ARMBAND-401
JIRA: FUEL-383

Change-Id: I9b0d8079e759cdc895260219a8a4989411c995ff
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

xci: Enable triggers for daily jobs

Please note that these triggers are temporary and they will be
adjusted to fit promotion based triggering. This will result
in running scenario deployments and testing if any scenario
has changes. Otherwise, daily jobs will be skipped.

Change-Id: I24e8c4d7f1da4d3203d81a8929ce2bc60d398ece
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Fix tempest_full name when running Functest fraser"

Add the docs build job for fuel project

Change-Id: I2d0a71fc40a4a6cd1f5b1e63ca429c5b83b7ad00
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

bug-fix: k8s capacity test name

JIRA: BOTTLENECK-242

TEST_CASE is wrongly defined. Spaces should be deleted
in order to make the right defination for shell.

Change-Id: I981e80af8fc8dfd9f375b44b205f7478e0d4f260
Signed-off-by: Yang (Gabriel) Yu <Gabriel.yuyang@huawei.com>

Fix tempest_full name when running Functest fraser

https://build.opnfv.org/ci/view/functest/job/functest-compass-baremetal-daily-fraser/373/console

Change-Id: I8c76620c67c28ea3f14ff79aef98ad2815a3aaa9
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

add k8s capcity test

JIRA: BOTTLENECK-242

Change-Id: I2fb92017b2b07ede448c817c89ae0d7572cfbae9
Signed-off-by: Yang (Gabriel) Yu <Gabriel.yuyang@huawei.com>

Merge "Move global-jjb parameter from releng to global"

jjb: xci: Make sure all virtualbmc process are gone

Daily jobs run on the actual slave so they leave virtualbmc processes
running even when the job is finished. As such, we need to make sure
that such artifacts are gone as soon as we start a new job.

Change-Id: I82f49279cc105e788db466e5040e6a31c537af5c
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Run tempest_full and tempest_scenario in daily jjbs"

Merge "Set NODE_NAME as the description for ansible runs"

Move global-jjb parameter from releng to global

As these only affect jobs defined in global-jjb (no other jobs used
these variable names) they should be safe to define at the global level.

Change-Id: I646c3afc73757bff561cc84b80df064e13680080
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Add functest-k8 job for arm platform

Create functest-k8 job for arm platform. It will be triggerd by
container4nfv jobs.
Add 2 arm pods to functest-daily pod list.

Change-Id: If8209574263b863f2a907cd962f9511cc3db74ea
Signed-off-by: Jingzhao Ni <jingzhao.ni@arm.com>

Run tempest_full and tempest_scenario in daily jjbs

It simply adds OpenStack jobs in OPNFV daily gates.
OPNFV Installers seem good enough to meet the OpenStack merge criteria.

Rally is still excluded as it ends after 3 hours.

Change-Id: I16ea72c1ca49f485d81f9b06b435e9731b56083a
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "xci: Log functest results to console for daily jobs"

Merge "xci: Switch to functest-smoke for daily jobs"

xci: Log functest results to console for daily jobs

Change-Id: Ic3f31fea8170af8b1e9845856976ef57df496e1e
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Pass functest tier and suite to downstream jobs

Change-Id: I206b729c09d30eb81432d11638c2654a96c3b9e8
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Build and run functest-benchmarking"

xci: Switch to functest-smoke for daily jobs

Change-Id: I958c8f857c28a45c009daba36c4bcef7adda4bbe
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Enable yardstick"

jjb: xci: Turn on bash debug option

The script does not behave as it should so we need to enable the debug
option in order to debug it properly

Change-Id: I13cd4d027c0d9bb9229466148ea4c913508cba2a
Signed-off-by: Markos Chandras <mchandras@suse.de>

jjb: xci: Do not check for scenario changes in releng-xci repo

There are no scenarios in releng-xci anymore so we must not try and
determine the impacted scenario. Using the default one is good enough
for CI. Users can still override the defaults using the usual methods.

Change-Id: I47207ebddae79fd89615bfd664f211879aabae92
Signed-off-by: Markos Chandras <mchandras@suse.de>

Build and run functest-benchmarking

Change-Id: If2597ae36a2c6599b524543b67aac7f6272b384a
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

xci: Execute prepare-tests.sh to prepare OPNFV VM

It also fixes the results directory where Functest log is cat from.

Change-Id: I3d8ea06d3741c70108cdb1c7f040969dbacf79a5
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Adapt jobs to use common prepare-tests role"

Merge "Https now works for artifacts.opnfv.org"

Https now works for artifacts.opnfv.org

Also, I believe that https://artifacts.opnfv.org/
now works behind the GFW  and so
https://build.opnfv.org/artifacts.opnfv.org/index.html
Will no longer be needed.

Change-Id: I5ce850a0264a0d56d27756928f82c6c03868b622
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Https now works for artifacts.opnfv.org

Also, I believe that https://artifacts.opnfv.org/
now works behind the GFW and so

https://build.opnfv.org/artifacts.opnfv.org/index.html

Will no longer be needed.

Change-Id: Ieeaf9331a71a108db1d7a7a538f5f25179b98932
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

xci: Enable yardstick

Change-Id: Id48d1dcb6c1998f7f6d0f71cb9380ed7fcf7b320
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Adapt jobs to use common prepare-tests role

In order to activate more test tiers from functest and also
start running yardstick, we need to do the test preparation
at one go and then run what's supposed to be run.

This change is required for below changes to be verified
successfully
    https://gerrit.opnfv.org/gerrit/#/c/61639/
    https://gerrit.opnfv.org/gerrit/#/c/61641/

Change-Id: Ib3ae2241921383b77c23b05443325aa6240cc176
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "[Clover] Add docker build job for sample-app"

Merge "[fuel] Re-enable Fraser triggers"

[fuel] Re-enable Fraser triggers

Keep running Fraser CI scenarios so Dovetail gets to run against its
intended baseline.

To keep POD usage down, schedule only baremetal HA scenarios,
3 Fraser scenarios per week.

JIRA: FUEL-381

Change-Id: I0cedf4ed38a146b4e6ad0e10bd3030ab0c1e833f
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Add Doctor maintenance job

Change-Id: I1d5d83df75f25ae3f54a660e5a0cba4290a1510b
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

xci: Remove leftover VMs before proceeding with the deployment

Change-Id: I12e1dc7d79ca74df1ba02e16e55e91f4f47a818c
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Add option --deploy-scenario <deploy_scenario_name> to support DPDK"

Merge "Bottlenecks results dir has been changed"

Merge "remove congress test in Daisy"

Merge "xci: Create virtual daily jobs for scenarios"

Bottlenecks results dir has been changed

Change-Id: I18a5b51c7c72a33db9864caf2635b2fcde3e8de6
Signed-off-by: xudan <xudan16@huawei.com>

container4nfv: fix command line syntax error

Change-Id: Ib4bbf639c3a1c80eec9a9e3d52c17e934a465ce1
Signed-off-by: Yibo Cai <yibo.cai@arm.com>

[Clover] Add docker build job for sample-app

Change-Id: Iac612137bd4b1a45550849c3180525cfe74f4a7f
Signed-off-by: Junaid Ali <junaidali.yahya@gmail.com>

xci: Create virtual daily jobs for scenarios

Change-Id: I2cb52d85a86bf70dfaf151606138d671e618e5d0
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Revert "CPERF: Fix csit odltools install""

Revert "CPERF: Fix csit odltools install"

This reverts commit 38ca028551d2e498fdfe41627f8bf79a43a6a0fa.

Change-Id: If37f0d40a50b410004d563bed5887f8237110d44

xci: Adjust build blockers and fix functest preparation

Functest preparation is moved into the deployment job to ensure
things are prepared before we are done and functest job gets
triggered. Making the preparation in functest job will cause
us to either reinitialize venv or depend on deployment job directory.
Apart from that, the env vars necessary for functest are available
within deployment job anyways so reusing that will make running
functest simpler.

See the comments in xci-daily-jobs.yaml builder macros.

Change-Id: I4c5bbe5f4b31bb620986d75ba78de6c0fe442975
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Fix XCI_DISTRO vars and remove clean_vm cleanup steps

Change-Id: Ie1d652607f8f56f5e1cf0409dc628b1add615cd9
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Reconfigure xci-daily-virtual jobs"

Merge "[fuel] Add Docker build jobs"

Merge "[Compass4NFV]Add os-stor4nfv-ha scenarios"

Merge "container4nfv: update arm64 cni deployment jobs"

xci: Reconfigure xci-daily-virtual jobs

The execute shell parts need to be switched to existing
scripts but since the scripts were mainly written for
verify jobs, the adaptations they require has potential
to cause issues so it needs to be done in a separate
change.

Apart from that, the verify and daily jobs can't be run
on same slave at the moment due to a bug in opnfv vm
creation playbook. If clean vm exists on the node, the
playbook fails. Build blocker is enable for verify and
daily jobs to ensure the jobs don't end up on same slave
for the timebeing.

Change-Id: Iefaf5a5c2d4a79bd48a5f9da28d68748bc67f511
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Https now works for artifacts.opnfv.org

Change-Id: Ic3aa4bea2b546c95ce8187927a5762009adbd429
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

[Compass4NFV]Add os-stor4nfv-ha scenarios

Change-Id: I845f4fb0c51d9d1adccc8cfc3fe838a01882f52d
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Add option --deploy-scenario <deploy_scenario_name> to support DPDK

JIRA: DOVETAIL-729

Change-Id: I78c464300e329a9356cffa81e53263912486c2c2
Signed-off-by: xudan <xudan16@huawei.com>

CPERF: Fix csit odltools install

PIP installing odltools attempts to install/update chardet which was
already managed by yum in the container so need to remove it.

Change-Id: Id07b76b080ff5b7e77d4c110c90a15018397d039
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Add SFC to daily

Change-Id: I51e5ecce1e7e5ef851e3c031aeb7819c0712c72d
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "[fuel, armband] Add os-nosdn-vpp scenarios"

[fuel] Add Docker build jobs

JIRA: FUEL-383

Change-Id: I80049726c256d2891ae1cfbacbc54781d3d81c70
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel, armband] Add os-nosdn-vpp scenarios

Added the triggers for both ha and noha versions of the scenario

Change-Id: Ibba782d82712b69b755592a878fc69bf6696cba7
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

container4nfv: update arm64 cni deployment jobs

- add vhost-vpp test
- deploy k8s only once for all cni deployment tests

Change-Id: I0d3966b15dc7f23713b5729bb7617b0c46e0ac83
Signed-off-by: Yibo Cai <yibo.cai@arm.com>

remove congress test in Daisy

As Daisy don't support congress currently.

Change-Id: I1d70c01ef12555622d3e2800d2eba12b652fb23b
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Merge "Update Releng PTL for Anteater Reports"

Apex: Fix verify blocking with csit

Make apex verify virtual deployment occur on the same node where
apex-verify job is running. Block apex-verify from starting if csit
promote is running.

Change-Id: I86e76232003b509db516e8d78703d43d36456d14
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "[dovetail] set correct Cinder process name on Apex"

CPERF: Add CSIT top level suite name arg

Change-Id: I9b6dd3887c84ab035284400b8d3912fb691f1975
Signed-off-by: Tim Rozet <trozet@redhat.com>

[dovetail] set correct Cinder process name on Apex

In fraser, cinder-api runs as an apache module called cinder_wsgi.

JIRA: DOVETAIL-690

Change-Id: I6660e1e17e61c0010295431290d5db20777af0d4
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

CPERF: Install ODL tools and log

Adds pip installing odltools into the cperf container. CSIT jobs now
fetch ODL and other OS logs via apex.

Change-Id: I532d3a6fed156709cb305a9f7a6721d1db2eaebc
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Apex: Add nosdn ipv6 to daily"

Apex: Add nosdn ipv6 to daily

Adds ipv6 nosdn scenario to daily. Also includes a fix where the
trailing new line in the template would be removed and fail jjb check in
jenkins.

Change-Id: I928f7b1cf12381cb2af3a8c7e4beb8e8014451c9
Signed-off-by: Tim Rozet <trozet@redhat.com>