xci: Cat functest log until the log upload is enabled

Change-Id: I883e6e29cf102d1069e3760ab95dd24d76d0a222
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Add envs via volume mapping"

Merge "[fuel, armband] Fix broken regex in cond (2)"

Merge "add testapi-client verify job"

Add envs via volume mapping

Change-Id: I39bdde31bfc5674eecf1528427b55a7f0335bd89
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Merge changes from topics 'decouple_verify_automate', 'simplify_automate_jjb'

* changes:
  decouple testresults verify job from automate job
  simplify automate jjb definition using releng_macro

[fuel, armband] Fix broken regex in cond (2)

Fixes: af7df31

Change-Id: I6369ded12a50a2aa7f0268488c5511fba9732a99
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

[fuel, armband] Fix broken regex in dovetail cond

Fixes: af7df31

Change-Id: I13e20591ce82792a12a514ae62e3b3dd4ed50e65
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

xci: Do not fail the job if virsh command fails

Change-Id: Ie5fae322f98ec6c9c2236486642c0d71c6a04aae
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Add functest-kubernetes project job"

xci: Fix scenario name extraction

Change-Id: Ifcea3d364b73d0d19d46aaf2bd2210ec6440f383
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Build opnfv/xtesting via functest-xtesting"

Merge "Pull the latest parent when building containers"

[compass4nfv] add nosdn-bar-noha scenario

Change-Id: I5a513e143aff0775d066532af14165c4509aa82e
Signed-off-by: wutianwei <wutianwei1@huawei.com>

add testapi-client verify job

Change-Id: I83f57a0967d6b8744a7c4890092fe0596e705291
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

modify qtip job template

The parameter 'SUT' is meaningless to storage job and experiment
job.

Change-Id: I40322962111896773821b8ef2f05e6f330d7da00
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Add functest-kubernetes project job

It mainly inherits from functest project jobs.

Change-Id: Ibcb8825ee3d98ca816a5036e0a66776e314f2ddb
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

xci: Use distro specific ssh config while sshing to xci vms

Change-Id: I9366639570315f879a662ca9e65a1894cd905a92
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Use distro specific ssh config while sshing to xci vms

Change-Id: I231488cd9de58a9051bd289c3d584841e7335417
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Use distro specific ssh config while sshing to xci vms"

xci: Use distro specific ssh config while sshing to xci vms

Change-Id: I5e8b738d4293040b2792a926cd13708180590bbb
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

[Yardstick] add apt-get autoremove to free up disk space

yardstick builds are failing due to running out of disk space
when too many kernels are left installed.

Try apt-get autoremove to cleanup before updating

[yardstick-verify-master] $ /bin/bash /tmp/jenkins4572301318127685434.sh
Reading package lists...
Building dependency tree...
Reading state information...
build-essential is already the newest version (12.1ubuntu2).
python3-dev is already the newest version (3.5.1-3).
python-dev is already the newest version (2.7.12-1~16.04).
The following packages were automatically installed and are no longer required:
  linux-headers-4.4.0-101 linux-headers-4.4.0-101-generic
  linux-headers-4.4.0-103 linux-headers-4.4.0-103-generic
  linux-headers-4.4.0-104 linux-headers-4.4.0-104-generic
  linux-headers-4.4.0-108 linux-headers-4.4.0-108-generic
  linux-headers-4.4.0-109 linux-headers-4.4.0-109-generic
  linux-image-4.4.0-101-generic linux-image-4.4.0-103-generic
  linux-image-4.4.0-104-generic linux-image-4.4.0-108-generic
  linux-image-4.4.0-109-generic linux-image-extra-4.4.0-101-generic
  linux-image-extra-4.4.0-103-generic linux-image-extra-4.4.0-104-generic
  linux-image-extra-4.4.0-108-generic linux-image-extra-4.4.0-109-generic
Use 'sudo apt autoremove' to remove them.
0 upgraded, 0 newly installed, 0 to remove and 111 not upgraded.
4 not fully installed or removed.
After this operation, 0 B of additional disk space will be used.
Setting up linux-image-extra-4.4.0-116-generic (4.4.0-116.140) ...
run-parts: executing /etc/kernel/postinst.d/apt-auto-removal 4.4.0-116-generic /boot/vmlinuz-4.4.0-116-generic
run-parts: executing /etc/kernel/postinst.d/dkms 4.4.0-116-generic /boot/vmlinuz-4.4.0-116-generic
run-parts: executing /etc/kernel/postinst.d/initramfs-tools 4.4.0-116-generic /boot/vmlinuz-4.4.0-116-generic
update-initramfs: Generating /boot/initrd.img-4.4.0-116-generic
W: mdadm: /etc/mdadm/mdadm.conf defines no arrays.

gzip: stdout: No space left on device
E: mkinitramfs failure cpio 141 gzip 1
update-initramfs: failed for /boot/initrd.img-4.4.0-116-generic with 1.

Change-Id: I79396162c5300c8cbaecc474473af81842f79db8
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Build opnfv/xtesting via functest-xtesting

Change-Id: I63d79a2c84221736e08d4bea1a2cf8ac92c023d9
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Pull the latest parent when building containers

Change-Id: I534c14f4415c16661fb95966077621497c6f9cdc
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

xci: Move run-functest.sh execution out of ansible

Change-Id: I40195f08012774c22178a27f146c402b33ecd8fc
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "[armband] Add os-nosdn-ovs-ha scenario"

Merge "Add xtesting project job"

Merge "[Functest] Run k8s tests on Joid"

Merge "Modify the daisy slavel-label in yardstick daily jobs"

Merge "change Dovetail CI jobs on Fuel"

Merge "[QTIP] Add a new variable "SUT" in project"

decouple testresults verify job from automate job

Change-Id: I45f01dbeb3ed9c1d3efe495f57bcbbfbb0d0b3e2
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

simplify automate jjb definition using releng_macro

1. leveraging macro gerrit-trigger-patchset-created
2. leveraging macro gerrit-trigger-change-merged
3. rename automate to testresults-automate

Change-Id: I3dfee8dad28db7e818b912fed6d65b60b3f96391
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

[Functest] Run k8s tests on Joid

Change-Id: I43ba42b2181b7f89a3f551a12eed4ab42d89cbee
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Add xtesting project job

It mainly inherits from functest project jobs.
xtesting is used everywhere except for project name which has to be
functest-xtesting from the time being.

Change-Id: I2c00c01b567b3c65b7acdec5c29b8c839d068366
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "Set functest repo as variable"

Merge "xci: Set the scenario to os-nosdn-nofeature if the verify is skipped"

xci: Set the scenario to os-nosdn-nofeature if the verify is skipped

The envInject complains due to nonexistent scenario.properties so we
set the scenario to os-nosdn-nofeature to suppress the failures since
there is nothing to fail.

Change-Id: Ic259ec53e77cf8afe62638a1b447c8e58863b419
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Enable functest healthcheck"

Merge "xci: Correct the gerrit project name for sdnvpn"

[armband] Add os-nosdn-ovs-ha scenario

Added triggers for os-nosdn-ovs-ha scenario and reshuffled the other jobs
To be merged after https://gerrit.opnfv.org/gerrit/#/c/52491/ is merged

JIRA: ARMBAND-343

Change-Id: I35614637f1f4aac459dbb3d49be4bdd33174ca92
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

[QTIP] Add a new variable "SUT" in project

QTIP test runs against with host and vnf.

Change-Id: I863cb48356f6ba74043b51ebfae8e5ff2f241abc
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

[compass4nfv]trigger k8s on baremetal pod

1. add the trigger k8s on baremetal
2. modify the default DEPLOY_SCENARIO

Change-Id: I9d216c12905b36b4fbba7d9214fcf6fccf1d79c4
Signed-off-by: wutianwei <wutianwei1@huawei.com>

[Yardstick] set yardstick ci debug switch on

Yardsitck CI default print INFO level message,
this patch turn the DEBUG on for Fraser debug.

Change-Id: I3d4436e6610648ab64439ba410f4fe07a54d6dc0
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

Merge "[QTIP] Delete Euphrates CI jobs"

Merge "[Compass] Add new scenarios"

Merge "[compass4nfv] add DEPLOY_SCENARIO macro"

xci: Enable functest healthcheck

Change-Id: I261bfafefcd1fb5dcfead20697759e46d3556b46
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Correct the gerrit project name for sdnvpn

Change-Id: Ied1014546f6bd4d80896f29f86374a2865f95dca
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "xci: Set appropriate permissions for the key"

xci: Set appropriate permissions for the key

Change-Id: I6387ca1f7eaf107f735eab82917d77b2f3a3d90a
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Do not set DEPLOY_SCENARIO manually

Change-Id: Iccd7ef674c9b80daba511f45cc48f403ca0f3e0b
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Move out of WORKSPACE before wiping it out and log scenario to console

Change-Id: Ia2caeef24a199580a9eeb2ba6214fa2008f65c1c
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Fix the Gerrit Trigger clone issue for external scenarios

When a patch comes in for an external scenario, Gerrit Trigger injects
refs for that patch for the corresponding project. With the previous
configuration, job attempts to get that patch for releng-xci instead
of the actual project.

But switching to the right project causes Jenkins jobs to fail since
the releng-xci will not be checked out to WORKSPACE.

This change makes the clone for the repo/patch work and then it wipes
out the WORKSPACE and clones releng-xci there to get the actual script
parts to work.

Change-Id: Ide31c21a209dff953118f51e9b09de1d206a3085
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Fix extracting scenarios for generic scenarios

Change-Id: Ib58ff1a8b093af550f86d337327114df50da4ae7
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

xci: Change project name matching to REG_EXP

Change-Id: Ic706c120ac879741d5562427a6c3e90162223762
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "Enable verify jobs for external scenarios"

[compass4nfv] add DEPLOY_SCENARIO macro

fix the error Unrecognized macro 'DEPLOY_SCENARIO' and deploy failed.

Change-Id: Ic34a0d99c2a6026303046c2b350da205372ec78e
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Merge "Download 3 extra images and remove modification of fuel openrc file"

Merge "Update the postscriptbuild usage"

[QTIP] Delete Euphrates CI jobs

Delete Euphrates CI jobs.

JIRA: QTIP-292

Change-Id: I6ab6055fccc2bb7de299bab5732f97565ecef808
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

change Dovetail CI jobs on Fuel

1. run test suite default on Fuel on Tuesday for HA scenario
2. run test suite proposed_tests on Fuel on Monday, Wednesday and Friday
   for HA scenario

JIRA: DOVETAIL-613

Change-Id: I67ef5d7dddfee01817b933ae3eeccf704924f9b0
Signed-off-by: xudan <xudan16@huawei.com>

Fix naming for ansible build server stuff

Botched that last change

Change-Id: If44039052332738a575d62c57faae95462b489a8
Signed-off-by: agardner <agardner@linuxfoundation.org>

include vars was mis named - build server ansible

fix name

Change-Id: I0b58dbad8bb0618623e44ffa4049fccdd80b5547
Signed-off-by: agardner <agardner@linuxfoundation.org>

Disable noop for ansible build server config

Time to go live.
If this breaks I have shell on these machine and can fix

but should be fine

Change-Id: I616797cd3512b594d1daa846308e7a8643fb9cb0
Signed-off-by: agardner <agardner@linuxfoundation.org>

Fix slave monitor job.

must be run on the same builder each time.
output goes to /tmp/ its just a textfile per slave.
hasetbin stopped working, so I turend off the silly graphs.

Change-Id: I7300710c338f74e5426ab3cd2e2707ac2553f982
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Revert "Update Functest jobs""

Revert "Update Functest jobs"

This reverts commit 7b9734aaca2fb04d1d8750b755a2880d60176889.

Change-Id: I5926d8013e57f2f0a68985b91aa8ab746bbbf1ab

jjb: xci: xci-start-new-vm.sh: Set pipefail option

In commit I77d5d66c0146f943d805612ca5b47e2eed3ffc41 the 'ts' utility
was added in order to print timestamps for deployment. However, this
breaks the exit code since 'pipefail' was not set so every job was
returning 'success'.

Change-Id: I2625a655a7334b1e43b690618821e69377075ed1
Signed-off-by: Markos Chandras <mchandras@suse.de>

Set functest repo as variable

Related to: https://gerrit.opnfv.org/gerrit/#/c/52513/

JIRA: FUNCTEST-917

Change-Id: Ifdcc3c893134f3835ea12b134e55f9094d51c581
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

[Compass] Add new scenarios

add the following scenarios and run on master
  1. k8-nosdn-stor4nfv-ha
  2. k8-nosdn-stor4nfv-noha

Change-Id: I2c505263fbf48ea25be735ebe14e3c4d8097bf91
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Modify the daisy slavel-label in yardstick daily jobs

Accoding to https://gerrit.opnfv.org/gerrit/#/c/52063/, the jobs of
daisy master branch have been moved from zte-pod3 to daisy-baremetal.

Change-Id: I6f2a93bd89f606c0506ef2bf60fe67f96ade0571
Signed-off-by: Alex Yang <yangyang1@zte.com.cn>

Download 3 extra images and remove modification of fuel openrc file

1. Download 3 extra images for functest snaps_smoke and cloudify_ims
2. Remove the modification of fuel openrc file because of this patch has
   added a function to check cacert file
   https://gerrit.opnfv.org/gerrit/#/c/52021/

Change-Id: I2cab3bf11231d5d6ad39dca6d2d833355b1e6679
Signed-off-by: xudan <xudan16@huawei.com>

Merge "Jenkins not reporting lint results to gerrit"

Jenkins not reporting lint results to gerrit

I set -x in a test and then it did report.
not sure what's going on here,
I thought this was fixed.
May as well cat the violation log as we debug

Change-Id: I142fb3855ebc000ee90aa24e0ecb336bb9b313df
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Update Pharos Dashboard Deploy Job and Disable"

Merge "jjb: xci: Use the 'ts' utility to print timestamps on executed steps."

Merge "Fix SFC Email PTL Macro"

Merge "Update Functest jobs"

Update Functest jobs

Add support for functest tier with multijob
Add publishers separate for fetures and
all other functest tiers
Run functest features suits in a mutijob
Since there are no arm specific requirements,
remove arm-daily builders and jobs

JIRA: FUNCTEST-917

Change-Id: I92e3d7ca378dd6d293520c679c741de4bf336639
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

Fix SFC Email PTL Macro

Includes the name of the PTL but should be just the email.

Change-Id: If6ef3b7c15defd44c6f86a24d6250840c37dd24b
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update Pharos Dashboard Deploy Job and Disable

Copying the keys required for talking to JIRA and disabling the job
until chages can be tested to ensure a deploy runs successfully.

Change-Id: Ib3602338cfe06d5507f5d3f5b853906feb39f4c5
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Move generation of artifacts.opnfv.org to jenkins

Move generation of artifacts.opnfv.org/index.html
and sub pages into a jenkins job.

Script was run on cron on master previously.
run on lf-build2

Run job once per hour (it takes a long time to run)

Block if job is already running

Change-Id: Icc03cac61a802e036e4af8a9b9e3a244e147abea
Signed-off-by: agardner <agardner@linuxfoundation.org>

jjb: xci: Use the 'ts' utility to print timestamps on executed steps.

We can use the 'ts' utility to print timestamps on every executed
command so we can keep track on the duration of each task and the
job overall.

Change-Id: I77d5d66c0146f943d805612ca5b47e2eed3ffc41
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Add functest-kubernetes repo to lint verification"

Merge "Rename var XCI_LOOP to CI_LOOP to align with Functest"

Merge "jjb: xci: Fix bifrost blockers for XCI jobs"

Add functest-kubernetes repo to lint verification

Change-Id: Ia1e05db344e6e6b4a773bf17157488716ac0c305
Signed-off-by: Jose Lausuch <jalausuch@suse.com>

jjb: xci: Fix bifrost blockers for XCI jobs

The bifrost regexp was wrong leading to conflicts betwen the XCI
and bifrost jobs. Moreover, we need to add the same restrictions for
jobs/node on bifrost jobs similar to the XCI ones. This finally fixes
the 'throttle' property to use the 'xci-verify-virtual' category.

Change-Id: I6d3f8fdd82738c1d079b1a3fdef134753eb4281a
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "jjb: xci: bifrost-verify-jobs: Increase build-timeout value"

Merge "Remove 'cd && pull' commands from jjb-merge job"

Remove 'cd && pull' commands from jjb-merge job

These are no longer needed since the server has been migrated, and a git
clone already exists in the workspace.

Change-Id: I07b5ff9185323d7295578b23a634e2d0e03afcd7
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

jjb: xci: bifrost-verify-jobs: Increase build-timeout value

The bifrost jobs could run in parallel with the XCI ones so it may take
longer than 90 minutes to complete. Lets double the timeout value in
order to ensure that we don't fail due to a Jenkins timeout.

Change-Id: I53a442f434d839d891bf03e41ba1a6a4459fd878
Signed-off-by: Markos Chandras <mchandras@suse.de>

jenkins-jnlp-connect.sh takes time to launch

wget --timestamping https://build.opnfv.org/ci/jnlpJars/slave.jar && true
this takes time, especially from china.

Tell monit to back off while waiting for the pid file to
be created

Change-Id: I02327323d50d0a4a8b379535d8da84a20348ba6f
Signed-off-by: agardner <agardner@linuxfoundation.org>

jjb: xci: Add missing job blockers for XCI merge jobs

We shouldn't allow the merge jobs to run in parallel with the verify
ones when both are testing the same distro since one may wipe the
'clean VM' of the other one. Moreover, we should restrict the number of
jobs allocated on nodes in order to avoid overloading them.

Change-Id: I9c0b9b5061e41b21c01789fc4676e72e0e082f17
Signed-off-by: Markos Chandras <mchandras@suse.de>

Enable verify jobs for external scenarios

This change extracts the scenario that is impacted by the patch
which triggered the verify jobs and saves the scenario name into
java properties file. This file will then be used by envInject
plugin to inject the scenario name into the build environment.

If the triggering change impacts multiple scenarios, the build
will result in  failure and the developer will be informed about
a possible way to rectify the issue.

Support for generic scenarios will be introduced in subsequent changes.

Change-Id: I6406299c1352b6e9b8a9297c5441adf03445be33
Signed-off-by: Fatih Degirmenci <fdegir@gmail.com>

Merge "[daisy] Move master branch jobs to zte-pod2"

Merge "container4nfv: trigger yardstick test"

Merge "Fix functest k8s job"

Merge "[fuel] Disable Euphrates triggers"