Add the function of yardstick testcase reporter

JIRA: YARDSTICK-324

Change-Id: I58969265f88d5c20f46f0b1097f5b0ccb1d9a40d
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

Merge "Revert "enabling apex mock-detached deploy state""

Revert "enabling apex mock-detached deploy state"

This reverts commit 1d617af8d19f5c2715d21aa6a7ad969ca193ebc1.

Change-Id: I208b8daa34ed78440364a18876a498d8e0614c95
Signed-off-by: Tim Rozet <trozet@redhat.com>

Revert "adding bash env values for detached state"

This reverts commit 308d62f20d0084d57a67c2c95466dbdee92ac92c.

Change-Id: I9376fd8240a7d9a33d91ddf1c1dc0e51282640ec
Signed-off-by: Tim Rozet <trozet@redhat.com>

adding bash env values for detached state

Change-Id: I4a01e3459fb01bd70b07722d8e74099b7cc4ae8d
Signed-off-by: Dan Radez <dradez@redhat.com>

enabling apex mock-detached deploy state

Change-Id: Ic7b8875aff7588b8e55fe245124461ce9c5f6332
Signed-off-by: Dan Radez <dradez@redhat.com>

Enable ovs scenario for ha baremetal

JIRA: OVSNFV-34

Change-Id: I2ef756d2fac2cb7ffbcc64c549c1580785b8bb24
Signed-off-by: Billy O'Mahony <billy.o.mahony@intel.com>

Add ZTE-POD3 in CI

Add ZTE-POD3 to support whole procedure of CI, including:
deployment, yardstick and funectest.
Currently it supports os-nosdn-kvm-ha scenario at the initial step

JIRA: PHAROS-247

Change-Id: I70dde8765696ee08339e7cada2428f8461b5f3a2
Signed-off-by: Julien-zte <zhang.jun3g@zte.com.cn>

Add BRIDGE parameter when deploy Fuel

Currently BRIDGE is hardcode with 'pxebr'. If the lab uses another
bridge name, it can be use supported in releng. This parameter is
supported in Fuel project already.

JIRA: RELENG-134

Change-Id: Ie1df46a247eaebb1814506d555f73d03a1e5566e
Signed-off-by: Julien-zte <zhang.jun3g@zte.com.cn>

rename the maas installation script.

Change-Id: I0296579255492f68782216d0f4ae5fc7682f2109
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Merge "kvmfornfv: Create daily job and enable artifact upload"

[compass] deploy moon with ha mode

Change-Id: Ia040c85ad26317d087895b9a50d26cc456a0605b
Signed-off-by: meimei <meimei@huawei.com>

kvmfornfv: Create daily job and enable artifact upload

Change-Id: I75b9bb58b3413514b1e3fea63185e210f56de95a
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

kvmfornfv: Fix artifact upload location for the changes under review

Change-Id: Ieb6b30b86290ac0662914ad8a0dff356675737f9
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Apex: Adds fdio, ipv6 scenarios/jobs

Changes include:
 - Adds nosdn-fdio scenario and daily
 - Adds odl_l2-fdio scenario and daily
 - Adds nosdn ipv6 deploy job to daily (no tests)

Change-Id: Ibd82f4cbda405b3e99c338df863b9a361da2d779
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "[compass] change the cmd of getting endpoint because of ugly warnings"

fuel: Create and enable jobs for noha scenarios

Change-Id: I9606adf43f23040a01963b142eee8bb3cadf1224
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

arm-pod1: Adding arm-pod1 to the list of CI pods

Adding arm-pod1 to a list of hardcoded pods,
marking it as a CI pod. JIRA: ARMBAND-62

Change-Id: I549cd1a546d1021338922a027f173805a2a8e285
Signed-off-by: Paul Vaduva <Paul.Vaduva@enea.com>

[compass] change the cmd of getting endpoint because of ugly warnings

Change-Id: I5082a6fb3a2d27d17753cf42dc1555cbb3d8eb9a
Signed-off-by: meimei <meimei@huawei.com>

Merge "qtip: Create job for zte-pod2 and override fuel IP"

kvmfornfv: Skip cloning repo for the parent job

The parent job does nothing but triggering the downstream jobs
so it is wasteful to clone the repo for this job.

Change-Id: Ib346db5434a3db9e69bbbdfc4fc33f75a8acdffa
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

kvmfornfv: Fix the project type for kvmfornfv-verify jobs

Change-Id: I1bb14ea3f2f162e79c7a40e8339f9230c1bdb6ad
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

qtip: Create job for zte-pod2 and override fuel IP

Change-Id: I0a9684ca93667924f34cbbd44c3e8e5111ebd8e8
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

kvmfornfv: Improve patch verification jobs

This change
- changes the kvmfornfv-verify job to multijob so job abortion works when a new
  patch for the same change arrives
- creates 2 phase jobs for patchset verification, build and test
- enables artifact upload and download

Change-Id: I9de85e2f223e83e2256aaba831b88b0a879962b5
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Promote Trevor Bramwell to committer

Change-Id: I0f68a9c94d84c60fa9070d26f3b98896f11b92c0
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

add trivial fix to trigger jjb update

Change-Id: I88733b01136e553181e3fbe17c84842b3a707f4f
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

fix builder-merge

Current builder-merge job does not update all jenkins job definitions,
since '-r' option is missing while executing 'jenkins-jobs update'.

https://build.opnfv.org/ci/job/builder-merge/1469/console

Change-Id: Ifc0de0edb6383a0f525ec94f4222f0f48f2b3ce8
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

fix opnfv-docs (file-paths)

Change-Id: Ib0462e33381d1a1a454a845f1e8fd7dfe3a3e7d1
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

fix opnfv-docs jjb

Change-Id: I919b7ba04e573f0b386407681ab46f012359d19e
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

fix opnfv-docs job trigger (verify)

All opnfv-docs jobs are not run, except yardstick, after [1] merged.
This patch fixes the bug in the verify job definition.

[1] https://gerrit.opnfv.org/gerrit/#/c/17479/

Change-Id: I9c0ac67d31f712d44030649aaec38b1c22fa3f67
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

fix opnfv-docs job trigger

All opnfv-docs jobs are not run, except yardstick, after [1] merged.
This patch fixes bug in the job definition.

[1] https://gerrit.opnfv.org/gerrit/#/c/17479/

Change-Id: I75c1fac52a5a87a659fe0417f5da046b73a53b20
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

update testapi server in testresults.opnfv.org

support body of post results carries no trust_indicator
add unittest of no trust_indicator in post results body
specify changes in db

JIRA: FUNCTEST-391

Change-Id: Ic61a5edbad1bca7689d618761bca94ef69dea80b
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Set schedule for fuel-os-nosdn-kvm-ha scenario

Change-Id: Ic912f5209c769f4aaeff36fc6517918599964c89
Signed-off-by: Michal Skalski <mskalski@mirantis.com>

Merge "Apex: adds ODL SFC to daily"

Apex: adds ODL SFC to daily

Change-Id: I993c459d012bddbcd4db041ada17aa9133d0bbf4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Pin Flake8 to 2.6.2 for python linting

A new version of flake8 recently came out that dropped support for
python 2.6 and introduced regressions.

Change-Id: I6b91d6feced4d24f71897b66dfb9faeae64ad611
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Mount a local image store directory to qtip container."

Replace single by double quotes in fetch credentials

'fuel --env $env_id' fails because a variable in single quotes
is not read, it is treated as a literal string.
When using double quotes, the variable is replaced by
its value

Change-Id: I39e777ec27c547e012d6f4674bc24e20d421889c
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Use head instead of tail

When retreiving an environment id use head to get the first available
environment

Signed-off-by: Dimitri Mazmanov <dimitri.mazmanov@ericsson.com>

[Functest] Increase daily job timeout to 180

Some installer/scenarios take too long to execute the
tests and the job times out.. Although this is not the
best solution, we can let the installer teams run the
tests to see why it takes too long sometimes)

Change-Id: I37cc393c65408741c5f0ecb9cc12ad6297c31d6d
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Merge "[multisite] trigger functest followed daily deployment job"

Merge "clean opnfv/opnfv-docs.yml"

[multisite] trigger functest followed daily deployment job

Change-Id: I0317d3c1869494c7552a5b5699bb7b3af3ecc5f0
Signed-off-by: meimei <meimei@huawei.com>

Merge "Enable delete for artifact retention script"

Merge "Enable artifact signing for fuel merge jobs"

Enable delete for artifact retention script

To see what will be deleted:
https://build.opnfv.org/ci/view/All/job/artifact-cleanup-daily-master/18/console

Checked with ovs team, and we are good to remove their
varied rpms.

No reponse from the apex, compas, armband or fuel leads, but nothing wierd
being deleted there, just old isos

Change-Id: If4e7592192dcc80388aa872633d1fcca6442186f
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Make environment id dynamic

Removed hardcoded value of fuel environment. The value is now fetched
from an environment variable FUEL_ENV.

Signed-off-by: Dimitri Mazmanov <dimitri.mazmanov@ericsson.com>
Change-Id: Iae8e5139f013ca7947e79a1a9a44efd82f48b95b

[Functest] Add DEPLOY_TYPE in the container creation

Change-Id: Id06771db96d1ca014c153ffc2b7567d6b2ea07ea
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Always use controller from environment 1

In case of multiregion fuel deployments (which is implemented using fuel
environments), always use a controller from the first environment
(RegionOne), as for multisite RegionOne is the master region.
This fix will not affect single region deployments, because the -env 1
property will result in the same single output.

Signed-off-by: Dimitri Mazmanov <dimitri.mazmanov@ericsson.com>

clean opnfv/opnfv-docs.yml

- make 'opnfv-docs-*' jobs run against all repositories which has docs
  directory.

- remove docs builder from yardstick-project-jobs

JIRA: RELENG-133

Change-Id: Id0cf6e600ed112c6f082f6bc924eaeccb0481e49
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

enable onos-sfc-ha daily deployment.

Change-Id: I9e7033eb9c64e9f922f61e4dca20be1de8f06383
Signed-off-by:Yuanyou Zhang<zhangyuanyou@huawei.com>

Apex: adds onos sfc to daily

JIRA: APEX-172

Change-Id: I651a0f5a5afba82f46b719b16015d588f8bb8a5f
Signed-off-by: Tim Rozet <trozet@redhat.com>

functest: Adjust job timeout based on the loop

Change-Id: I405bcbf26965a5290fb8dad9786881251e6aea81
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Redirect stdout to /dev/null when pushing results to artifacts

Change-Id: Iafa37838337caf8c196b396f2e94c405629a0e2c
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

[bugfix] wrong directory of ansible log

Change-Id: I79f209dac19cb0e66049f5a6062a54ff2971cefe
Signed-off-by: meimei <meimei@huawei.com>

Apex: Enable bgpvpn scenario in daily

Change-Id: I82af3388275ceb716d24f2a11405a213624ffbd1
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Enable Flake8 Checks on QTIP"

Merge "Add 'builder-sandbox' job to Releng"

Merge "add job definition based on existing apex cperf runner template"

Enable Flake8 Checks on QTIP

Add '.tox' to list of directories to ignore since it contains unrelated
python code in virtualenvs.

JIRA: QTIP-89

Change-Id: I577c4ea61fe6b76f7f67ec7c9d4af544d0f73f71
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Don't fail the build if importing gpg key fails

I prefer that the build succeeds even if the siging fails.
once we have the signing working on all pods I will revert this change.

Change-Id: Icc5e0a158ccee6e09be9b275d403f5252a473430
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

enable uploading log from huawei nodes

Change-Id: Ie69fa1f4493e806a8c357a4cff1f9c51bbfa591e
Signed-off-by: meimei <meimei@huawei.com>

Merge "Move Releng Jobs under 'releng' folder"

Implementation of testcase/pod declaration dashboard for adding tescases

JIRA: FUNCTEST-26

Change-Id: Iceb1c54ba8c245d43cc553533fdf4fd3284c7132
Signed-off-by: raghavendracharik <raghavendrachari.kamsali@hpe.com>

bugfix: should reset os_version from os_version_option

Change-Id: Ifcd9355055405c9c4f89a774d7a8fc44997884e3
Signed-off-by: meimei <meimei@huawei.com>

Merge "[compass]reset building timer, and deployment time"

[compass] undo uploading test results untill got the credential

Change-Id: I0352866f022b9f0ca71e5c6a21126983266d39a9
Signed-off-by: meimei <meimei@huawei.com>

[compass]reset building timer, and deployment time

the duration of daily job have been decreased to within 4hours

Change-Id: Ia42f223bfd0df7c7138cee3db69b11a67a78d64b
Signed-off-by: meimei <meimei@huawei.com>

Merge "change the region from Canonical to default regionOne"

Merge "[compass] add new scenario ci jobs"

Add 'builder-sandbox' job to Releng

Any changes slated for the 'sandbox' branch of this repo will be
published to https://sandbox.opnfv.org, with the exception of the
releng-ci jobs themselves. This will provide visibility to changes
slated for Jenkins and allow for easier understanding of how JJB works
for new users.

- Step [2/2] in publishing jobs to the Jenkins sandbox

JIRA: RELENG-91

Change-Id: I94c28081b1d96e5eae76a4f1f11dcf5cb9b6cf35
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Move Releng Jobs under 'releng' folder

This should help clarify what jobs belong to releng, and that the yaml
file is unaffiliated with 'releng-defaults' and 'releng-macros'.

- Step [1/2] in publishing jobs to the Jenkins sandbox
- Explicitly passes the '-r' to jenkins-jobs so that other understand
  releng recursively tests jobs. This option is implied by the
  jenkins-job-builder configuration on the server.

JIRA: RELENG-91

Change-Id: Ic4bad170b3d311376a2d081089ac538b53595728
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

add job definition based on existing apex cperf runner template

Change-Id: I4d077acac3d2cd4e23bec7da3b5143dcb027e33f
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Apex: disables failing parent daily job due to a deploy job failing"

Apex: disables failing parent daily job due to a deploy job failing

Change-Id: I556b29578fd8debc7b38970fe256c858aa70556a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Remove md5 hashes from OPNFV Artifact API

These are not used and irrelevant

Change-Id: I742b5c33087749804fb16d1df21b15e7dfe44c4d
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Enable artifact signing for fuel merge jobs

refactored things into functions so we can choose between verify and
merge
Will skip verify jobs.
Do we need to upload verify jobs to google storage?

Change-Id: If9f677cbe38e17a22ac1c54698168383240cbc38
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

change the region from Canonical to default regionOne

Enabling the onos with sfc for trusty only.

Change-Id: I052eb82b2d4ccccad958c5564ede53a923e00aa5
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

[compass] add new scenario ci jobs

os-odl_l2-moon-noha
os-nosdn-kvm-ha

Change-Id: I13e3efbc657b7ce37eac43ff80a0168d59901340
Signed-off-by: meimei <meimei@huawei.com>

Merge "fuel: Adjust build throttling"

fuel: Adjust build throttling

Change-Id: I4eab4e87e145881912fcc5570cbb04606f0514fb
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

[multisite] add new testsuite of multisite

Change-Id: If63cca009f539125ce877fa05f40178bb1c71247
Signed-off-by: meimei <meimei@huawei.com>

Merge "add unit tests for Moon"

Merge "RELENG-131 Add CI task for joid-os-onos-sfc-ha."

[compass]zenial deployment bugfix

Change-Id: Iaced24782396f78d0620f4283b33c644739f88e7
Signed-off-by: meimei <meimei@huawei.com>

joid: Revert the order of functest and yardstick

Change-Id: I70318bc7c7197fdd67dc42fcd13e0d529b3f018d
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Merge "joid: Update verify jobs and introduce Multijob and verify phases"

fuel: Fix jjb escaping

Change-Id: I5cc33f949b7db0c17b92a01777cb57b16a05b637
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Merge "apex, cperf: Adds cperf job to Apex"

Merge "fuel: Update verify jobs and introduce Multijob and verify phases"

fuel: Fix the log argument

Change-Id: Iae50079427b9fb264b22ba19919cb66029a085fa
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

[compass] COMPASS vm Support ubuntu 16.04

JIRA: COMPASS-431

Change-Id: I42b632170f4423627b57bdc21f5d5718a46067b0
Signed-off-by: meimei <meimei@huawei.com>

Merge "[compass] add new job of onos-sfc senario"

Merge "Add support for ubuntu (keep support for centos)"

Merge "fuel: Upload deployment logs to artifacts.opnfv.org"

Add support for ubuntu (keep support for centos)

Compass signing was failing on ubuntu

Change-Id: Ieda6cfd67c7b36045b0a30c01a0eb3f0e7165710
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

fuel: Upload deployment logs to artifacts.opnfv.org

Change-Id: I99bb2f621c49e50d169d4d51d0811a4531988188
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

change ci from base-on-pod to base-on-scenario (in progress)

1. first need to change in yardstick
2. then change in releng to modify the input parameter

JIRA: YARDSTICK-299

Change-Id: Ie9c96d4ddc6b15b0488ef1cff1f2c7531429baf0
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

fuel: Update verify jobs and introduce Multijob and verify phases

This is the first step towards improved Commit Gating and this
change does not impact the current way of working for Fuel. This
means that no additional verification activities will be done for
changes/patches coming to Gerrit for Fuel as of yet and only builds
will be used for patchset verification

Because of this, the new execute shells contain nothing but simple echos.

Functest job hasn't been created/connected either since we don't do
full commit verification.

This change
- switches verify job to Multijob project type since Freestyle does
  not support aborting all the downstream jobs when a new patch for
  same change comes to Gerrit for existing change. When Gerrit Trigger
  aborts the upstream verify job that was triggered for the previous
  patch of the same change, Multijob then aborts the downstream
  phase jobs, not leaving orphaned phase jobs behind.
- creates phase jobs to do limited verification activities in order
  to provide more granular feedback. Earlier phases fail the patch
  verification in order to provide feedback for the failed phase
  rather than whole basic, deploy, and smoke test.

Change-Id: I053db2a54020139d57d74d254a25ed0480767267
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

joid: Update verify jobs and introduce Multijob and verify phases

This is the first step towards improved Commit Gating and this
change does not impact the current way of working for Joid. This
means that no additional verification activities will be done for
changes/patches coming to Gerrit for Joid as of yet.

Because of this, the execute shells contain nothing but simple echos.
Functest job hasn't been created/connected either since we don't do
full commit verification.

This change
- switches verify job to Multijob project type since Freestyle does
  not support aborting all the downstream jobs when a new patch for
  same change comes to Gerrit for existing change. When Gerrit Trigger
  aborts the upstream verify job that was triggered for the previous
  patch of the same change, Multijob then aborts the downstream
  phase jobs, not leaving orphaned phase jobs behind.
- creates phase jobs to do limited verification activities in order
  to provide more granular feedback. Earlier phases fail the patch
  verification in order to provide feedback for the failed phase
  rather than whole basic, deploy, and smoke test.

Change-Id: If6723b06bb937329e104ca85865b0d750c45e91e
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>