Merge "[compass] undo colorado CI build since we have release colorado3.0"

Merge "Functest: don't clean existing Docker images"

3rd party ci: Override GIT_BASE to use ODL Gerrit for 3rd party ci jobs

Change-Id: Ia105d32133c5b2df3bea363ff8cb94b2984fb172
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Merge "3rd party ci: Create jobs for ODL netvirt testing in OPNFV"

Apex: fixes build directory for build/upload

Change-Id: Iaa6b60c1de8c80e2a3c582a478131b1d7fc2dc3f
Signed-off-by: Tim Rozet <trozet@redhat.com>

3rd party ci: Create jobs for ODL netvirt testing in OPNFV

This change creates basic job structure for ODL netvirt testing in OPNFV.
The job should be triggered once the below job is completed
    https://jenkins.opendaylight.org/releng/job/netvirt-patch-test-current-carbon
and fetch the artifact that is already built by the job. The build result
codes OPNFV is interested in are SUCCESSFUL and UNSTABLE.

Once the job gets triggered, the build URL will be fetched from ODL Gerrit using
Gerrit REST API and the artifact will be downloaded from ODL Jenkins.
The downloaded artifacts will then be installed on the Apex environment.

There are 3 points that need to be highlighted.

- The Apex environment will be created using the promoted snaphots/qcow2
images and already deployed VMs will be brought up. See below for the details.
    https://jira.opnfv.org/browse/APEX-360

- The hardcoded values in download-netvirt-artifact.sh are there to get the
basics in place. (branch name, job name, etc.) Once things work as expected,
they will be made dynamic.

- A workaround using Gerrit REST API is put in place to get build number of the
job netvirt-patch-test-current-carbon to download the artifact.
The reason why we use Gerrit REST API is that the OPNFV Jenkins has an older
version of Gerrit Trigger Plugin which lacks feature that injects review
comments as environment variables. Upgrading Gerrit Trigger Plugin will not
help either since OpenStack JJB does not support the new version of Gerrit
Trigger Plugin and does not generate the new job XML.

JIRA: RELENG-171

Change-Id: I7ff8c5809dcb2e8ffa5c7c5aeb9cdf70e4e7e2f4
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Functest: don't clean existing Docker images

This will save some time. The "docker pull" command
takes care of upgrading the image if it exists.

Change-Id: I195e0ddac3673cdafb13ab6d78874367420e37ff
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Merge "Update testcase model for Test DB"

Merge "Apex: Fixes build paths"

Apex: Fixes build paths

Change-Id: I42eceade9d24a237c2a0f725db9e39de53c5be8a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "doctor: adds test result check"

Merge "dovetail/arm: ci loop job added to debug code bugs"

Update testcase model for Test DB

JIRA: FUNCTEST-587

Change-Id: I8473cf5df181197a16920f507aff2a5c00dc332e
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

[compass] undo colorado CI build since we have release colorado3.0

Change-Id: Ia67e9b6620b5a73e2afa68fbe60af093fa01a410
Signed-off-by: meimei <meimei@huawei.com>

Apex: fix verify referencing old odl_l2 scenarios

Change-Id: I46b55c30711e544d71dcb0191b3aa32a4e080772
Signed-off-by: Tim Rozet <trozet@redhat.com>

doctor: adds test result check

Change-Id: Id43d0434e4215c265a669505973ccea012741da6
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

dovetail: testsuite name bugfix

Change-Id: Ib0f4420d296d08be60367ea5b25789f81e242555
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

dovetail/arm: ci loop job added to debug code bugs

JIRA: DOVETAIL-153

1.based on https://gerrit.opnfv.org/gerrit/#/c/25681/, however, this has to be
  triggered manually, not convinient for debugging, and may affect daily ci loops
2.not used for release criteria or compliance,
  only to debug the dovetail tool bugs with arm pods

Change-Id: Ide35f50129f30f4c8d7b7f50d52f9fa1d35cac69
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Merge "Adjust log path"

Adjust log path

JIRA: COMPASS-509

Change-Id: Id50ec863657ced5e4ee3371952c3be0e2cc519a6
Signed-off-by: liyuenan <liyuenan@huawei.com>

Fix typo in docker opnfv jobs

Change-Id: Iff8145eec8946355fd92ebfeacbc0a7661af4b1b
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

jjb: infra: bifrost-verify-jobs: Remove python-xml workaround

python-xml is now being pulled in as dependency in the
pip-and-virtualenv dib element so remove the explicit package
installation.

Change-Id: I94ea6a3b0f35cc62b945a8ced0a641ded7b36fea
Signed-off-by: Markos Chandras <mchandras@suse.de>

qtip: update qtip jenkins template

- remove offline pods info
- set job description for jenkins dashboard
- simplify job name

JIRA: QTIP-181

Change-Id: Ic12b9931faadc6954a736a0d33e2f3bd06b0d010
Signed-off-by: wu.zhihui <wu.zhihui1@zte.com.cn>

Merge "Add arm pods to dovetail CI jobs"

Apex: Updates deploy for new build/Danube and removes Colorado

Change-Id: I6b8df28e5ae27c70f9de2c0346dee2e1828e8ab8
Signed-off-by: Tim Rozet <trozet@redhat.com>

Add arm pods to dovetail CI jobs

Change-Id: I1b0c61991f03ed2e81a67e475abfc8cb9830588c
Signed-off-by: cristinapauna <cristina.pauna@enea.com>

Merge "functest,doctor: CLEAN_DOCKER_IMAGES"

Merge "bifrost: test-bifrost-deployment.sh: Use the new 'openssh-server' dib element"

Merge "jjb: infra: bifrost-verify.sh: Make sure the cache directory exists"

functest,doctor: CLEAN_DOCKER_IMAGES

The builder/script 'functest-cleanup' will delete docker images
for functest, so that we can make sure the latest functest will
be used during the tests. But, it also makes a pod downloads
image every time CI triggered functest-suite.

This patch adds option 'CLEAN_DOCKER_IMAGES' (default=true),
so that the job owner can choose whether he/she wants to drop
the docker images or not depends on frequency or charactaristics
of the job.

Change-Id: I0b7affccb404fb8c4f0939b00d65e363ec62f7c3
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Merge "KVMFORNFV: Implementing kvmfornfv daily jobs."

Merge "dovetail: docker running method improvement"

dovetail: docker running method improvement

JIRA: DOVETAIL-152

Change-Id: Ib0ab73278b4a6dad83323647728fc2769cee3839
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Merge "move option into deploy_ci.sh"

move option into deploy_ci.sh

Change-Id: I106e16c2ccae08eae42a16048b81bf02cc55bf87
Signed-off-by: meimei <meimei@huawei.com>

dovetail: python command added

JIRA: DOVETAIL-150

Change-Id: Ib1f916b348a2578c69d159d971a7663b74f61c97
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

undo healthcheck in verify job

Change-Id: Ia5b302a2a9b18480a0e95c318795007152a4c0c1
Signed-off-by: meimei <meimei@huawei.com>

dovetail: bugfix for cmd running

JIRA: DOVETAIL-150

Change-Id: Ia1e26b99cc8591fb17169c13c59138db2237a2c2
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

dovetail: add missed parameter

JIRA: DOVETAIL-150

Change-Id: I5585f63f113c6f5a099be6f202966bf80d42d728
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Merge "dovetail: to support multi_testsuite"

Merge "Update qtip notification recipients"

dovetail: to support multi_testsuite

JIRA: DOVETAIL-150

Change-Id: Iae4aec947c9cbe5fc4535338908d9e4d51f4ce44
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Update qtip notification recipients

- several members have retired
- Zhihui WU <wu.zhihui1@zte.com.cn> is now in charge of CI jobs

Change-Id: Idd65cc9b24fd277bc942f115186232fdadac110d
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Merge "Functest jjob: add the option to provide the rc file as parameter"

Merge "Add possibility to build a Release Docker image"

Merge "doctor: copy log file to 'tests' dir"

Restrict Gerrit Triggers to OPNFV Gerrit Server

With the addition of ODL and OpenStack Gerrit servers, it's important we
don't generate additional noise by accidentally building against these
Gerrit servers when we don't intend to.

JIRA: RELENG-179

Change-Id: Ia163c6c3eaa58e8e21dc6548a839062fcbde39ed
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Only Build docs for OPNFV Projects

Without 'server-name' explicitly set the gerrit trigger defaults to
watch ANY gerrit serer. Thus docs builds are running against ODL
patchsets. This should not happen.

Change-Id: I3cb720b96c77a79197e42356b805c8bf560318bf
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Apex: fixes non-updated scenarios for fdio-ha

Change-Id: I54b6600592260e797fce533b13585302b08a66e0
Signed-off-by: Tim Rozet <trozet@redhat.com>

Functest jjob: add the option to provide the rc file as parameter

Change-Id: Icb5dd3f0f46eb4891609d1f0e4d868e84fe49a14
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

doctor: copy log file to 'tests' dir

Change-Id: I1d9592a1cad487066d1f28af73a50ee1606409e3
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Merge "doctor: drop postbuilders"

Add possibility to build a Release Docker image

New flag that if it's not empty, it will build the
image with the given tag instead of using master/stable.
These release builds will need to be triggered manually
by a Jenkins user with rights to build jobs.
The respective projects take the responsability to
build the release docker image whenever they
consider it is the right time.

Change-Id: I49b087e80eb134b8b3ddef8399f61eeac9b29619
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Merge "prototypes: bifrost: Increase default provision timeout to 3600 seconds"

doctor: drop postbuilders

Change-Id: I228619470b4baace4acbc53e0bd710dd0aea7c4b
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

prototypes: bifrost: Increase default provision timeout to 3600 seconds

Sometimes, the current '2400 seconds' timeout is not enough to all 3 VMs
to become reachable especially when the qcow2 images are becoming bigger
and bigger. This leads to spurious CI failures. Increase the timeout to
3600 seconds which should be enough for VMs boot properly

Change-Id: I06942952667df28341e5ce43d30619fe2e30326b
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Add parameters in init function"

Merge "doctor: fix file paths"

Merge "Apex: Adds odl_l2-fdio-ha to daily"

Merge "armband: Enable deploy-cache"

bifrost: test-bifrost-deployment.sh: Use the new 'openssh-server' dib element

This is a follow-up for b0a9b75e7481a24676c9488f17583c13b8b8026e
("Make use of the new 'openssh-server' dib element"). Remove the
openssh-server package from the default packages and use the
'openssh-server' element instead.

Change-Id: Ie14cdf93769ebefcae00f35d9e1ac149a31e7711
Signed-off-by: Markos Chandras <mchandras@suse.de>

KVMFORNFV: Implementing kvmfornfv daily jobs.

JIRA: RELENG-169

This patch includes updated scripts for implementing kvmfornfv daily
jobs to trigger cyclictest and packet forwarding testcases based
on the test name.

Change-Id: I7bb9aad05eaee340bf6af0d229c56399702bfd6b
Signed-off-by: Gundarapu Kalyan Reddy <reddyx.gundarapu@intel.com>

doctor: fix file paths

- fix file path to mount doctor code under review

- re-add workaround to archive functest suite log

- drop unnecessary params for jobs

Change-Id: I51ed4dbd7178c875cb6b047f26ae4c1db3d94687
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Merge "doctor: fix parameter setting"

doctor: fix parameter setting

In the current doctor jenkins jobs, default parameters for functest are
used.

This patch updates parameter settings, and also simplifies archive
instruction.

Change-Id: I6940d323271bc9492eeb5e9f8ca9faf02612f483
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Merge "Fix the non-virtual node error for virtual-deploy job"

Add parameters in init function

Change-Id: I8ce5219251ff21f2cf3a554d275b4d2584d70e0b
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Fix the non-virtual node error for virtual-deploy job

Change-Id: I617849b23aca515525f7e2219c3f268cbda80e43
Signed-off-by: zeyu zhu <zhu.zeyu@zte.com.cn>

Merge "Rearrange Releng Job and Parameter Files"

Merge "update doctor CI job"

armband: Enable deploy-cache

This enables the mechanism added in [1].

Armband just added support for caching deploy artifacts, like
bootstraps and target images, which take a lot of time at each deploy
to be built, considering it requires a cross-debootstrap via
qemu-user-static and binfmt.

For easier setup, the deploy cache depends on the local ISO storage
mechanism (/iso_mount/opnfv_ci), and reuses the same storage pool.

To enable deploy caching, just create the deploy-cache directory at:
/iso_mount/opnfv_ci/<branch>/deploy-cache

JIRA: ARMBAND-172

[1] https://gerrit.opnfv.org/gerrit/#/c/25191

Change-Id: I161205a87f13cd78e79b96bfc37a5f68aba093cc
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Rearrange Releng Job and Parameter Files

Individual project jobs can now be tested using:

  jenkins-jobs test -r jjb/global:jjb/$project

- Rename '.yaml' files to '.yml' so they get checked by the
  verify-releng.sh script, and update the script to include checking of
  '.yaml' files.
- Move parameter and macro files under new 'global' directory.

Change-Id: I6b74f5d8af2bced3256a7f4a33983df5310511a2
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Apex: Adds odl_l2-fdio-ha to daily

Trades noha for ha scenario

Change-Id: I595766b8a06b115e0453c593c728c85e5a648e3d
Signed-off-by: Tim Rozet <trozet@redhat.com>

jjb: infra: bifrost-verify.sh: Make sure the cache directory exists

Fixes the following problem on new slaves:

chown: cannot access '/home/jenkins/.cache': No such file or directory

Change-Id: Ia461acd44466819e47a459e23ee6fd47ac1bad69
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Remove trailing slash in example"

Merge "Refactor Docker build jobs"

Merge changes from topic 'fix-monit-script'

* changes:
  utils: jenkins-jnlp-connect.sh: Make monit actions conditional
  utils: jenkins-jnlp-connect.sh: Fix start up script

Merge "jjb: infra: Fix and enable the SUSE job for bifrost"

Merge "bifrost: Make use of the new 'openssh-server' dib element"

utils: jenkins-jnlp-connect.sh: Make monit actions conditional

When executing the connection testing command as indicated in [1], -t is
added to the monit start-up script parameters. This prevents the jenkins
service from running in the background and create the pid file. Because
of that, monit is confused and reports the service as failed. We fix
this by moving all the monit related actions inside the 'monit'
conditional block.

[1]: http://artifacts.opnfv.org/octopus/brahmaputra/docs/octopus_docs/opnfv-jenkins-slave-connection.html#connecting-slaves-from-community-labs-to-opnfv-jenkins

Change-Id: I7371c4560311b84f56eff3461254264e1769ff7e
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "bug Fix: adapt reporting to merge of smoke+sdn tiers"

Merge "Add Escalator CI job"

Merge "Enable Flake8 Checks on Escalator"

Merge "set "opnfv-lint-verify" as the basic verify of compass"

jjb: infra: Fix and enable the SUSE job for bifrost

Fix SUSE parameters for os, release, packages and elements and
enable the job.

Change-Id: I0fc0fbc5fcf8df04186d6c19aaf363020d31a44c
Signed-off-by: Markos Chandras <mchandras@suse.de>

bifrost: Make use of the new 'openssh-server' dib element

Make use of the new 'openssh-server' dib element to achieve a consistent
behavior of ssh server across all distributions.

Change-Id: Ib10066a244fe44530969702cd465cdd79454b8fe
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Add jobs for ARM virtual POD"

Remove trailing slash in example

also add caveat note

Change-Id: Ie662ffb9240c3ffdbc4c7317d63744a8beedec4a
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

bug Fix: adapt reporting to merge of smoke+sdn tiers

Change-Id: I74d9834b609797f85d52e97ccdfeab614c1c07bf
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "Apex using a different network settings file for master"

Merge "Enable qtip verify job"

Refactor Docker build jobs

- Remove incremental tags for stable branches
- Use "latest" or "stable" tags only
- Have a single job template for all projects

More info here: https://wiki.opnfv.org/display/INF/Docker+handling+in+CI

Change-Id: Ibce3ef2faee136f56f0eab12dfe7a93c267db854
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

update doctor CI job

Doctor has an experimental CI job. It has three parts (builders in
jjb / runners in CI). The main job will trigger two runner jobs which
will run 'test/run.sh' in the same CI pod with different inspector
(sample and congress). While executing those two children jobs, the
main job will block CI pipline on that pod. In order to avoide deadlock
and sequencial runner job execution, we set two pipelines for the pod.
But, it still allow deadlock when we trigger two main jobs at the same
time.

This patch simplify the job definition by splitting two runner jobs
and removing the main job.

Change-Id: I4fadd58cc827a41927940c38cf05ed105c6f243c
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Make the requirements.txt compatible with Colorado

JIRA: YARDSTICK-428

Now in master, we move the requirements.txt from tests/ci/ to yardstick
root path.
But in colorado, this has yet to be done.If we cherry pick from master
to colorado, it will encounter error.
So we must make it compatible.

Change-Id: I0537d989e677b73e19a1e093166493f3f6d25783
Signed-off-by: chenjiankun <chenjiankun1@huawei.com>

Add jobs for ARM virtual POD

Pod virtual1 was added in the ENEA-ARM lab
This commit adds the jobs for it
JIRA: ARMBAND-162

Change-Id: Icaa798691f5ff60a58ae083eb1c366170c464b92
Signed-off-by: cristinapauna <cristina.pauna@enea.com>

multisite: Use correct names for the generated files

Change-Id: I030dbca1a44231ae0548a5b17cd2f419ec7a4289
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Enable qtip verify job

Change-Id: I15be7c9cab2ffa471a828b3295051cbd423988f5
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Merge "Adding GS_PROXY prefix to GS_URL in proxy scenario"

multisite: Run jobs on right nodes

Change-Id: Ia681d629eb685ed1186be2bb74e42e2067b48aa2
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

multisite: Adjust archival of generated files

Change-Id: I1e9236d04143c87bb85d15b05b6e42ea34438f8b
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>