[Functest] Run k8s tests on Joid

Change-Id: I43ba42b2181b7f89a3f551a12eed4ab42d89cbee
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Merge "Set functest repo as variable"

Merge "xci: Set the scenario to os-nosdn-nofeature if the verify is skipped"

xci: Set the scenario to os-nosdn-nofeature if the verify is skipped

The envInject complains due to nonexistent scenario.properties so we
set the scenario to os-nosdn-nofeature to suppress the failures since
there is nothing to fail.

Change-Id: Ic259ec53e77cf8afe62638a1b447c8e58863b419
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Enable functest healthcheck"

Merge "xci: Correct the gerrit project name for sdnvpn"

[compass4nfv]trigger k8s on baremetal pod

1. add the trigger k8s on baremetal
2. modify the default DEPLOY_SCENARIO

Change-Id: I9d216c12905b36b4fbba7d9214fcf6fccf1d79c4
Signed-off-by: wutianwei <wutianwei1@huawei.com>

[Yardstick] set yardstick ci debug switch on

Yardsitck CI default print INFO level message,
this patch turn the DEBUG on for Fraser debug.

Change-Id: I3d4436e6610648ab64439ba410f4fe07a54d6dc0
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

Merge "[QTIP] Delete Euphrates CI jobs"

Merge "[Compass] Add new scenarios"

Merge "[compass4nfv] add DEPLOY_SCENARIO macro"

xci: Enable functest healthcheck

Change-Id: I261bfafefcd1fb5dcfead20697759e46d3556b46
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Correct the gerrit project name for sdnvpn

Change-Id: Ied1014546f6bd4d80896f29f86374a2865f95dca
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Set appropriate permissions for the key"

xci: Set appropriate permissions for the key

Change-Id: I6387ca1f7eaf107f735eab82917d77b2f3a3d90a
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Do not set DEPLOY_SCENARIO manually

Change-Id: Iccd7ef674c9b80daba511f45cc48f403ca0f3e0b
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Move out of WORKSPACE before wiping it out and log scenario to console

Change-Id: Ia2caeef24a199580a9eeb2ba6214fa2008f65c1c
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Fix the Gerrit Trigger clone issue for external scenarios

When a patch comes in for an external scenario, Gerrit Trigger injects
refs for that patch for the corresponding project. With the previous
configuration, job attempts to get that patch for releng-xci instead
of the actual project.

But switching to the right project causes Jenkins jobs to fail since
the releng-xci will not be checked out to WORKSPACE.

This change makes the clone for the repo/patch work and then it wipes
out the WORKSPACE and clones releng-xci there to get the actual script
parts to work.

Change-Id: Ide31c21a209dff953118f51e9b09de1d206a3085
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Fix extracting scenarios for generic scenarios

Change-Id: Ib58ff1a8b093af550f86d337327114df50da4ae7
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Change project name matching to REG_EXP

Change-Id: Ic706c120ac879741d5562427a6c3e90162223762
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Enable verify jobs for external scenarios"

[compass4nfv] add DEPLOY_SCENARIO macro

fix the error Unrecognized macro 'DEPLOY_SCENARIO' and deploy failed.

Change-Id: Ic34a0d99c2a6026303046c2b350da205372ec78e
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Merge "Download 3 extra images and remove modification of fuel openrc file"

Merge "Update the postscriptbuild usage"

[QTIP] Delete Euphrates CI jobs

Delete Euphrates CI jobs.

JIRA: QTIP-292

Change-Id: I6ab6055fccc2bb7de299bab5732f97565ecef808
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Fix naming for ansible build server stuff

Botched that last change

Change-Id: If44039052332738a575d62c57faae95462b489a8
Signed-off-by: agardner <agardner@linuxfoundation.org>

include vars was mis named - build server ansible

fix name

Change-Id: I0b58dbad8bb0618623e44ffa4049fccdd80b5547
Signed-off-by: agardner <agardner@linuxfoundation.org>

Disable noop for ansible build server config

Time to go live.
If this breaks I have shell on these machine and can fix

but should be fine

Change-Id: I616797cd3512b594d1daa846308e7a8643fb9cb0
Signed-off-by: agardner <agardner@linuxfoundation.org>

Fix slave monitor job.

must be run on the same builder each time.
output goes to /tmp/ its just a textfile per slave.
hasetbin stopped working, so I turend off the silly graphs.

Change-Id: I7300710c338f74e5426ab3cd2e2707ac2553f982
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Revert "Update Functest jobs""

Revert "Update Functest jobs"

This reverts commit 7b9734aaca2fb04d1d8750b755a2880d60176889.

Change-Id: I5926d8013e57f2f0a68985b91aa8ab746bbbf1ab

jjb: xci: xci-start-new-vm.sh: Set pipefail option

In commit I77d5d66c0146f943d805612ca5b47e2eed3ffc41 the 'ts' utility
was added in order to print timestamps for deployment. However, this
breaks the exit code since 'pipefail' was not set so every job was
returning 'success'.

Change-Id: I2625a655a7334b1e43b690618821e69377075ed1
Signed-off-by: Markos Chandras <mchandras@suse.de>

Set functest repo as variable

Related to: https://gerrit.opnfv.org/gerrit/#/c/52513/

JIRA: FUNCTEST-917

Change-Id: Ifdcc3c893134f3835ea12b134e55f9094d51c581
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

[Compass] Add new scenarios

add the following scenarios and run on master
  1. k8-nosdn-stor4nfv-ha
  2. k8-nosdn-stor4nfv-noha

Change-Id: I2c505263fbf48ea25be735ebe14e3c4d8097bf91
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Download 3 extra images and remove modification of fuel openrc file

1. Download 3 extra images for functest snaps_smoke and cloudify_ims
2. Remove the modification of fuel openrc file because of this patch has
   added a function to check cacert file
   https://gerrit.opnfv.org/gerrit/#/c/52021/

Change-Id: I2cab3bf11231d5d6ad39dca6d2d833355b1e6679
Signed-off-by: xudan <xudan16@huawei.com>

Merge "Jenkins not reporting lint results to gerrit"

Jenkins not reporting lint results to gerrit

I set -x in a test and then it did report.
not sure what's going on here,
I thought this was fixed.
May as well cat the violation log as we debug

Change-Id: I142fb3855ebc000ee90aa24e0ecb336bb9b313df
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Update Pharos Dashboard Deploy Job and Disable"

Merge "jjb: xci: Use the 'ts' utility to print timestamps on executed steps."

Merge "Fix SFC Email PTL Macro"

Merge "Update Functest jobs"

Update Functest jobs

Add support for functest tier with multijob
Add publishers separate for fetures and
all other functest tiers
Run functest features suits in a mutijob
Since there are no arm specific requirements,
remove arm-daily builders and jobs

JIRA: FUNCTEST-917

Change-Id: I92e3d7ca378dd6d293520c679c741de4bf336639
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

Fix SFC Email PTL Macro

Includes the name of the PTL but should be just the email.

Change-Id: If6ef3b7c15defd44c6f86a24d6250840c37dd24b
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update Pharos Dashboard Deploy Job and Disable

Copying the keys required for talking to JIRA and disabling the job
until chages can be tested to ensure a deploy runs successfully.

Change-Id: Ib3602338cfe06d5507f5d3f5b853906feb39f4c5
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Move generation of artifacts.opnfv.org to jenkins

Move generation of artifacts.opnfv.org/index.html
and sub pages into a jenkins job.

Script was run on cron on master previously.
run on lf-build2

Run job once per hour (it takes a long time to run)

Block if job is already running

Change-Id: Icc03cac61a802e036e4af8a9b9e3a244e147abea
Signed-off-by: agardner <agardner@linuxfoundation.org>

jjb: xci: Use the 'ts' utility to print timestamps on executed steps.

We can use the 'ts' utility to print timestamps on every executed
command so we can keep track on the duration of each task and the
job overall.

Change-Id: I77d5d66c0146f943d805612ca5b47e2eed3ffc41
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Add functest-kubernetes repo to lint verification"

Merge "Rename var XCI_LOOP to CI_LOOP to align with Functest"

Merge "jjb: xci: Fix bifrost blockers for XCI jobs"

Add functest-kubernetes repo to lint verification

Change-Id: Ia1e05db344e6e6b4a773bf17157488716ac0c305
Signed-off-by: Jose Lausuch <jalausuch@suse.com>

jjb: xci: Fix bifrost blockers for XCI jobs

The bifrost regexp was wrong leading to conflicts betwen the XCI
and bifrost jobs. Moreover, we need to add the same restrictions for
jobs/node on bifrost jobs similar to the XCI ones. This finally fixes
the 'throttle' property to use the 'xci-verify-virtual' category.

Change-Id: I6d3f8fdd82738c1d079b1a3fdef134753eb4281a
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "jjb: xci: bifrost-verify-jobs: Increase build-timeout value"

Merge "Remove 'cd && pull' commands from jjb-merge job"

Remove 'cd && pull' commands from jjb-merge job

These are no longer needed since the server has been migrated, and a git
clone already exists in the workspace.

Change-Id: I07b5ff9185323d7295578b23a634e2d0e03afcd7
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

jjb: xci: bifrost-verify-jobs: Increase build-timeout value

The bifrost jobs could run in parallel with the XCI ones so it may take
longer than 90 minutes to complete. Lets double the timeout value in
order to ensure that we don't fail due to a Jenkins timeout.

Change-Id: I53a442f434d839d891bf03e41ba1a6a4459fd878
Signed-off-by: Markos Chandras <mchandras@suse.de>

jenkins-jnlp-connect.sh takes time to launch

wget --timestamping https://build.opnfv.org/ci/jnlpJars/slave.jar && true
this takes time, especially from china.

Tell monit to back off while waiting for the pid file to
be created

Change-Id: I02327323d50d0a4a8b379535d8da84a20348ba6f
Signed-off-by: agardner <agardner@linuxfoundation.org>

jjb: xci: Add missing job blockers for XCI merge jobs

We shouldn't allow the merge jobs to run in parallel with the verify
ones when both are testing the same distro since one may wipe the
'clean VM' of the other one. Moreover, we should restrict the number of
jobs allocated on nodes in order to avoid overloading them.

Change-Id: I9c0b9b5061e41b21c01789fc4676e72e0e082f17
Signed-off-by: Markos Chandras <mchandras@suse.de>

Enable verify jobs for external scenarios

This change extracts the scenario that is impacted by the patch
which triggered the verify jobs and saves the scenario name into
java properties file. This file will then be used by envInject
plugin to inject the scenario name into the build environment.

If the triggering change impacts multiple scenarios, the build
will result in  failure and the developer will be informed about
a possible way to rectify the issue.

Support for generic scenarios will be introduced in subsequent changes.

Change-Id: I6406299c1352b6e9b8a9297c5441adf03445be33
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "[daisy] Move master branch jobs to zte-pod2"

Merge "container4nfv: trigger yardstick test"

Merge "Fix functest k8s job"

Merge "[fuel] Disable Euphrates triggers"

Merge "Update Dovetail PTL Email Macro"

Rename var XCI_LOOP to CI_LOOP to align with Functest

Change-Id: If5c5b828312dc588515589b8075b9754537b8f86
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

[fuel] Disable Euphrates triggers

Change-Id: I3fd11c6efb13f46ec74a0237a180497397cdfefe
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Apex: Fixes concurrent apex-virtual jobs

We were missing concurrent on this job which was preventing parallel
execution.

Change-Id: I4d1ea62aef2a321220799cebee008f494490886c
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Attempt to fix apex-virtual parallel execution

Remove passing node params and enable global queue scanning.  Hopefully
this will allow 2 apex-virtual jobs to run at the same time (1 per each
slave).

Change-Id: I310dbc477e267c302d50599bab2a933ce988dba7
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Updates daily scenarios for Fraser

Scenario list for Fraser:
https://wiki.opnfv.org/display/SWREL/Fraser+Scenario+Status

Change-Id: I083dc5b0b9cea9f91d7a9568a05df5865aeafa05
Signed-off-by: Tim Rozet <trozet@redhat.com>

Fix functest k8s job

Change-Id: Ied442837e4e9fd25946590d3dbada6ff2cbe7fc3
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Update Dovetail PTL Email Macro

Let the 'email-dovetail-ptl' macro reflect that Georg Kunz is the new
PTL of the dovetail project.

Change-Id: I3b3bd53a7c7f146105a719727fd627bf15054aca
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

[daisy] Move master branch jobs to zte-pod2

This PS does:
1) Move master branch jobs to zte-pod2 which seems has a
more stable internet connectivity. This is trying to
solve master branch deployment unstable problem.

2) Disable Euphrates jobs to make room for master branch.

Change-Id: Id36f0ff6a268aabf0badd46f55bb397afe5e4830
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

container4nfv: trigger yardstick test

Change-Id: Ifdd504ff199c73a17cf007903a5480ee55f86102
Signed-off-by: Yibo Cai <yibo.cai@arm.com>

Update Pharos PTL in Email PTL Macro

Julien has recently been promoted to PTL of the Pharos project and the
macro for emailing the Pharos PTL should reflect this change.

Change-Id: Id3f025cd87284d480da892fc999d7379af50ac95
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Doctor: pass project parameter to other job"

Merge "vswitchperf: Use POD12 for VERIFY and MERGE jobs"

Merge "Add K8s Yardstick daily job for arm64"

Merge changes I68779792,Ide8d210e

* changes:
  Export CI_LOOP as expected by Functest
  Export an new var related to Energy in functest jobs

Add K8s Yardstick daily job for arm64

Add k8s Yardstick daily job for arm64 based on compass4nfv for arm64,
which would be triggered after the k8s deployment on arm64.

Change-Id: Ic928ce4bf0c32060a74a434b6bb3e9d9848f3e32
Signed-off-by: trevortao <trevor.tao@arm.com>

Doctor: pass project parameter to other job

From the failure log of doctor verify ci, project parameter is
not passed to other jobs.
see: https://build.opnfv.org/ci/job/doctor-verify-sample-master/33/console

Change-Id: I6a53cd609a261d90cdc0e1e10a3d7b05a515349e
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Bugfix: delete extra whitespace

Change-Id: I1fe8c9d4b6b2ee461320bc20342d439e23c9c616
Signed-off-by: xudan <xudan16@huawei.com>

Merge "[Dovetail CI] change dovetail CI jobs on Compass"

[Dovetail CI] change dovetail CI jobs on Compass

1. run default test suite on Compass on Monday and Tuesday for scenario
   'os-nosdn-nofeature-ha' and 'os-odl_l3-nofeature-ha'
2. run test suite 'proposed_tests' on Compass on Thursday and Friday for
   scenario 'os-nosdn-nofeature-ha' and 'os-odl_l3-nofeature-ha'

JIRA: DOVETAIL-612

Change-Id: I027ca278eb63bdc6842a9494b676cdab8d2d25bf
Signed-off-by: xudan <xudan16@huawei.com>

Export CI_LOOP as expected by Functest

Otherwise all testcases are skipped:
https://build.opnfv.org/ci/view/functest/job/functest-apex-baremetal-daily-master/764/console
https://build.opnfv.org/ci/view/functest/job/functest-apex-baremetal-daily-master/763/console

It will be enforced by a similar patch in Functest too.

Change-Id: I6877979295378ed9ce6b85ad62e8a78e1572b8ba
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Export an new var related to Energy in functest jobs

It conforms with "Unlink Energy from functest utils and constants":
https://gerrit.opnfv.org/gerrit/#/c/51943/

Depends-On: Iecd5d49b4d4c961c9dc51e43e54df1fcd4027266
Change-Id: Ide8d210eab26451a63911938fe0e1bafcf77c500
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "Ansible for build server"

Ansible for build server

Tests are working, switch to running on
lf-build1 and lf-build2 when triggered.

Change-Id: I1d3be9a84452cc3d6cd7097474bcc4dca0f70c6d
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "[Compass4NFV] Add blocking jobs"

Merge "vswitchperf: python version change"

Merge "[arm-build] prune-docker-images on all builders"

Add -y to for non-interactive ansible install

Change-Id: I2ab00b3b6aadf9efc5bac72fcdcd9941f12f8bc9
Signed-off-by: agardner <agardner@linuxfoundation.org>

[arm-build] prune-docker-images on all builders

Prune dangling references on all arm-build* hosts.
Remove arm-build2 as it will be retired.

Change-Id: Ib425b3ef8021fa74d5942609093234cad35c0644
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "missing sudo for ansible install"

missing sudo for ansible install

Change-Id: I6d7ab7746c75a8d33a27de3bf534b02cbc87e8ae
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Job for ansible to setup build servers."

Job for ansible to setup build servers.

set noop for now.
  -C, --check           don't make any changes; instead, try to predict
some
                        of the changes that may occur
  -D, --diff            when changing (small) files and templates, show
the
                        differences in those files; works great with
--check

Change-Id: I723fcf1b068b8ef73a0994be90271cb1cdd51ecb
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Apex: Cleanup slave/slave-label configuration"

Apex: Cleanup slave/slave-label configuration

Changes Include:
 - Remove defining 'node:' per job template and use slave-params
   defaults
 - Gate job was using daily/build slave, when it should be using virtual
   slave

Change-Id: Iec2321801daef1b1fa40724a244bf2f6edf36c6e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "fix sed command in macros"

jjb: xci: bifrost-verify.sh: Respect bifrost test failures

Make sure that failures during bifrost deployments are being
reported properly on Jenkins.

Change-Id: I333d27147caf7598665157c703907572e48041c0
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Get Daisy IP correctly"