[daisy] Prevent CI jobs run on the same POD parallelly

Change-Id: I0f20005873aac6c7c4f7e3baf04fab56f38b14df
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

Merge "[Daisy] Add docker image tarball builder"

Merge "multiarch: Modify doctor x86_64, aarch64 verify jobs"

fix deploy.sh not runing issue

deploy.sh is not called as jenkins log
+ cd /home/jenkins/opnfv/slave_root/workspace/container4nfv-daily-master/ci ./deploy.sh
No emails were triggered.

Change-Id: Ie590a53d05ef3d92f78cce0608c165cd2c98c582
Signed-off-by: Guo Ruijing <ruijing.guo@intel.com>

Merge "add simple e2e tests for PodsCotroller"

Merge "Switch yamllint job to only run against new files"

Merge "functest: Build Docker images with jjb"

Change git base for merge as well

Change-Id: I23b15eacbd7d207dfe1d8e29784a7c623cb0efb9
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Testing new docs verfiy job"

Change GIT_BASE to https

Change-Id: Ib589aed7f509d003eef35cf93825eb0950e5ae47
Signed-off-by: agardner <agardner@linuxfoundation.org>

functest: Build Docker images with jjb

docker-build: Dependency & manifest support

Except for images that have dependencies (as functest-components,
functest-helthcheck, functest-restapi, functest-features,
functest-smoke, functest-vnf), all docker images
are built SEQUENTIALLY in a multijob Phase called 'build-base-img'.
The images with dependencies are built in PARALLEL in the second
Phase, called 'build-child-img', only if the first Phase result is
SUCCESFULL.
The manifest images are created in a third Phase,
'create-img-manifest', through opnfv-manifest.sh script, only if
Phase 'build-child-img' result is SUCCESFULL.

To create manifest images, a mandatory step is to preinstall
manifest-tool on the build image dedicated VM (arm and/or amd)

JIRA: ARMBAND-310

Change-Id: Iaa6640568ed18a3b087db56449173841dd2757ff
Signed-off-by: Delia Popescu <delia.popescu@enea.com>
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Testing new docs verfiy job

These docs changes are also legit.
Looks like the reverify trigger is not working as well

Change-Id: I8d16abf3ce0fcae88aec4e8b81b24deb3a991b34
Signed-off-by: agardner <agardner@linuxfoundation.org>

Need to change directory check for new docs verify

old dir is no longer generated
grab dir created by tox -e docs

Change-Id: If52e931f6abdc8dcb39fbe7aac3c6b3342ce81c8
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Move all doc verfication to docs-verify-rtd-*"

Move all doc verfication to docs-verify-rtd-*

Ready for review (tested locally)

1) remove opnfvdocs-daily-{stream}:
We don't need a timed docs build. and it did not build anything usefull

2) remove opnfv-docs-verify-{stream}:
This uses depreciated and unmaintained opnfvdocs/scripts/docs-build.sh
It does not clone submodules and gives no usefull feedback
but it does post to artifacts and give a gerrit comment
move that functionality to docs-*-rtd-*

3) remove opnfv-docs-merge-{stream}:
does not upload anything meaningful

4) remove macro upload-generated-docs-to-opnfv-artifacts:
is no longer needed since we use read the docs

5) improve docs-verify-rtd-{stream}:
generate single page html and post to artifacts
send gerrit commment with location of single page html,
errors (like malformed table) are embedded nicely in the single
page output and give devs a single source of feedback on their work

6) improve docs-merge-rtd-{stream}:
this job now needs to remove review documenation created by
docs-verify-rtd-{stream}

TODO, after this is merged:
remove now unused opnfvdocs/scripts/docs-build.sh

Change-Id: I802eb11712d42555d34f986d061bf0dfc623c1e9
Signed-off-by: agardner <agardner@linuxfoundation.org>

vswitchpef: avoid build at ericsson-build3

VSPERF's VERIFY & MERGE jobs are having issues at ericsson-build3
since September. The problem is, that after a few successful runs,
machine starts to be very slow and thus it is not possible to execute
neither OVS nor VPP anymore. Debugging together with responsible
admins didn't help to find a root cause (probably a race condition
during execution of vsperf & other projects). As a temporary measure,
I want to tight vsperf jobs to ericsson-build4 only, where they work
without issues.

Change-Id: I62e482f57234f90fc127b6e6d9454488e17657fc
Signed-off-by: Martin Klozik <martinx.klozik@intel.com>
Reviewed-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

add simple e2e tests for PodsCotroller

Change-Id: I9baa04ff062f36569c1e143014239931de64cf32
Signed-off-by: thuva4 <tharma.thuva@gmail.com>

Merge "KVMFORNFV: Disabling daily job"

Merge "Sync requirements with OpenStack Pike"

Merge "Fix the misspelling"

Merge "Add Gerrit Trigger on Tag Creation"

Merge "Rename zte-pod4 to zte-virtual5"

Rename zte-pod4 to zte-virtual5

JIRA: QTIP-280

Change-Id: Ie588c3e38af82fe9b2de8bb01549a1c9249d54ff
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Add basic job for verifying pharos-tools repo

Change-Id: I5c5ecddc87e99f2b9e27e53381434d9f55d5e639
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Re-enabling docs jobs for Danube"

KVMFORNFV: Disabling daily job

This patch is used to temporarily disable kvmfornfv daily job from
triggering as Intel-pod10 is currently not available for executing
daily test cases.

Note: Will enable the kvmfornfv daily job once Intel-pod10
is available for executing test cases.

Change-Id: I834d50c68f15acb9d8a4377d8351cd29569a9e80
Signed-off-by: Navya Bathula <navyax.bathula@intel.com>

Add Gerrit Trigger on Tag Creation

We should be able to capture a tag creation event by triggering on
'ref-updated' but looking specifically at the 'refs/tags/' branch
prefix.

Though this will trigger a build against a specific tag, scripts will
still need to examine the GERRIT_REFSPEC to determine the tag name.

Change-Id: Ic18a3e11530fb71735431240f93d2074dacf4e1c
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

multiarch: Modify doctor x86_64, aarch64 verify jobs

Modify doctor verify jobs to run for each architecture.
JIRA: https://jira.opnfv.org/browse/ARMBAND-305

Change-Id: Ia25c3751ac18233290c9e98e74bc21d9dc35f27c
Signed-off-by: Catalina Focsa <catalina.focsa@enea.com>
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

Sync requirements with OpenStack Pike

OPNFV F-release is built on top of OpenStack Pike.
Functest depends on releng/modules and requires this update.

It conforms with the requirement management cleant for E-release [1].

[1] https://wiki.opnfv.org/display/functest/Requirements+management

Change-Id: If3c3a607c8d2d5515ada78b03104067937fb4b37
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "Remove compass4nfv weekly danube job"

Fix the misspelling

There is a mistake spelling about slave name,
the job cannot assign to correct slave.

Change-Id: I001ec82a30c6f33dd42795cbe990bfb5c2da9740
Signed-off-by: wutianwei <wutianwei1@huawei.com>

remove components out side of 3rd_party

components are implemented by TestAPI team, they are not the third
party code, put them under opnfv_testapi/ui directory

Change-Id: Ia0f5e2afe4bcb12bcb74d3a8d78fb28fe1432bec
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "divide resources into handlers and models"

Merge "add develop guide for testapi"

Remove compass4nfv weekly danube job

Change-Id: I5bd83b2dec6d6b28e619a2a427c0406a6a0c6a43
Signed-off-by: wutianwei <wutianwei1@huawei.com>

[Daisy] Add docker image tarball builder

This PS do:
1. Add docker image tarball builder as a Daisy project job.
   Name is daisy-kolla-build-.*
2. Upload image to artifact storage after building.
3. Fix new job runs on daisy-virtual.
4. Block jobs with each other which may run Daisy VM because
VM has the same name.

Change-Id: I148473ca33f1e10490684b7608354a4ba548714f
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

Use dovetail latest docker image cvp.0.8.0

Change-Id: I87ad5599f5a44074eb67502b02bd2083a773772d
Signed-off-by: xudan <xudan16@huawei.com>

Merge "add daily job for container4nfv"

Re-enabling docs jobs for Danube

The danube jobs are still needed for ongoing Dovetail documentation
efforts.

Change-Id: Ibf7174a63693d7c141cf110f6fbcfac4437102c9
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

divide resources into handlers and models

divide resources into handlers&models
put ui handlers into handlers directory
put User into user_models.py

Change-Id: I3d9e260097205213c3ea8d4eac08b9019e017f71
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "bugfix: E722 do not use bare except"

add develop guide for testapi

Change-Id: Iaa9c15092aafda2024f08c467eea2f3ab9cddd96
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

bugfix: E722 do not use bare except

new added pep8 check: https://build.opnfv.org/ci/job/testapi-verify-master/435/console

Change-Id: I29c1ffbb534babf55ec2fe675001cc85b9e2e922
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

bug-fix: ssl error for euphrates

Change-Id: I0e7f9f502cd3844aacfdbc006a71a081b1c4fde4
Signed-off-by: Gabriel Yu <Gabriel.yuyang@huawei.com>

Merge "Integrate yardstick on daisy master branch"

add daily job for container4nfv

Change-Id: I78a06c6123c9bfad33953eab0eb5db76ee0d5e84
Signed-off-by: Guo Ruijing <ruijing.guo@intel.com>

Execute ovs-logger cmds with sudo

In some installers we execute commands as ordinary users
and that causes problems when we need superuser priviledges.

Change-Id: I84786e63995990e9d68803ed50879b086b0bd4af
Signed-off-by: Dimitrios Markou <mardim@intracom-telecom.com>

change the K8 auto trigger time

K8s conflict with other CI job.
We change the K8s auto trigger time to fix this issue

Change-Id: I54042e31347e989975601305a6de5e98a4da7adf
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Do not set bashisms when calling build.sh

The maintainer can decide to set errexit nounset or pipefail
Plus, this fails as pipefail is a bashism and shell: calls sh

Change-Id: Ibac052fddce7e9a3eb7c536e08c64d9dad1a7a0a
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "add verify jobs for container4nfv"

Merge "allow authentication to be disabled"

add verify jobs for container4nfv

Change-Id: I8bca593398beb7e509c3ab7d02bf6fb7ad54b91a
Signed-off-by: Guo Ruijing <ruijing.guo@intel.com>

bug fix: score calculation based on build_tag

we were used to count the number of PASS of the last 4 runs
it works 80% of the cases

4 runs
4 OK => 3 points
3 OK => 3 points
2 OK => 2 points
1 OK => 1 point
0 => 0

it is different from the normal score calculation
4 OK => 3 points
3 OK => 2 points
2 OK => 2 points
1 OK => 1 point
0 => 0

Change-Id: Ib8df2c294e0036246176c181b7a7ac290ebea07e
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "criteria field must be 'PASS/FAIL'"

allow authentication to be disabled

in local deployment situation, authentication can be disabled by
setting authenticate=False of ui section in config.ini

JIRA: RELENG-324

Change-Id: I9157d1723851feb12435033dbdd59035e3eb5777
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

jjb: xci: bifrost: Enable jobs and use XCI ssh configuration

Enable the 'bifrost' jobs and also make use of the XCI specific
ssh configuration file.

Change-Id: I04d15610b596191622cf028b3408b4d63ee7090b
Signed-off-by: Markos Chandras <mchandras@suse.de>

criteria field must be 'PASS/FAIL'

criteria must be fix with 'PASS/FAIL', case insensitive
or else, BADREQUEST exception will be raises

JIRA: RELENG-327

Change-Id: Ic648b9d38937fc63924e42cfdf5345cdaa32e1ed
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "bug-fix: fix compass os_cert issue for bottlenecks euphrates"

Yeah, rtd did not have euphrates stream

Change-Id: I42cfed19942af1f6f4c09b27e839172693598a5d
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Update release tags for Docker builds"

Extend the Functest reporting black list

remove
* tempest_full_parallel
* rally_full

Change-Id: Ibb944e7d32dc3cf0fc0b87a269c9e2f0327410e4
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

bug-fix: fix compass os_cert issue for bottlenecks euphrates

Change-Id: I74cae84ad2613ac25a1896ae5b57d38f08545818
Signed-off-by: Gabriel Yu <Gabriel.yuyang@huawei.com>

Integrate yardstick on daisy master branch

JIRA: DAISY-9

1. Trigger yardstick job in daisy-baremetal-daily-master on zte-pod3
2. Add daisy pods in yardstick
3. Add EXTERNAL_NETWORK in installer params

Change-Id: Ia8e69e503102c1fb282d6d2c5acac2ac3cbfe747
Signed-off-by: Alex Yang <yangyang1@zte.com.cn>

Switch yamllint job to only run against new files

Intead of yamllint all files at once yamllint will only run against new
or modified yaml files.

Change-Id: I10b951427966409e15fb773b959adbd780497bad
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update release tags for Docker builds

Change-Id: I3c4d71239dfe66773931f5f5b9349faab443aa2d
Signed-off-by: Jose Lausuch <jalausuch@suse.com>

Moon job is still running.

I guess adding disabled true doesnt do anything.
Just going to neuter the job then..

Change-Id: Iff77f846b6c3eb15ea8c49cfa035449f7aaa1984
Signed-off-by: agardner <agardner@linuxfoundation.org>

Disable moon verify job.

Why is moon running against docs buids?
I don't know, but ts documentation release day.

Disabling moon

https://gerrit.opnfv.org/gerrit/#/c/45505/

Change-Id: Icb68bfc183347a98756f43073d6e5d9a0131144f
Signed-off-by: agardner <agardner@linuxfoundation.org>

Add new function to get indivial test score for aarch64

as architecture is not considered as a constraints (unlike scenario or
installer) we need to work on the build tag to retrieve the data

but it is not possible to use regex directly in the API

so retrieveing the accurate results require extra processing
 * based on build_tag, filter the results properly per scenario
 * build a table build_tag time for a given scenario
 * keep only the last 4 results
 * evaluation criteria field

It would simplified if architecture could be declared as a constraint
then querying the resuls will not change and not require intermediate
steps

JIRA: FUNCTEST-880

Change-Id: Id4fe4f56babf0964d41e299905c804e0d837c3d7
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

[Functest] Add TESTCASE_OPTIONS env variable to the Alpine containers

This patch also removes the --report flag when running a single
test case (functest-suite type of jobs)

Change-Id: Ic94fba53ced7c6f908905c02577e1b104f15afb7
Signed-off-by: Jose Lausuch <jalausuch@suse.com>

Merge "[Functest] Cleanup daily Jenkins job"

Merge "fuel, armband: Limit dovetail to Danube branch"

[Functest] Cleanup daily Jenkins job

There is a former job template which was used for testing Alpine
containers at the beginning on 2 alpine-pods. That is not needed
any longer since we are running Alpine everywhere.
Also, this patch re-orders the builders.

Change-Id: Iabb41552f513773ebae1170232b8db1aeceb9a59
Signed-off-by: Jose Lausuch <jalausuch@suse.com>

fuel, armband: Limit dovetail to Danube branch

While at it, limit functest & yardstick to master and
stable/euphrates, trying to work around missing job references
in Danube scenarios on ZTE PODs.

Change-Id: I89de0c3b3c914e1ad735980a995e5cae625238be
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

yardstick: remove apexlake

apexlake was removed from yardstick codebase

Change-Id: I8eb826aa725dfb0e2c2c7a0bc1b15931fa245967
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Merge "Added tox to nfvbench"

Merge "fuel: installer param: Add CI_DEBUG=false"

Merge "fuel, armband: verify jobs: Fix race condition"

Added tox to nfvbench

Change-Id: I1344241cc488481a64a7ba13da521537420a0c59
Signed-off-by: Kerim Gokarslan <kgokarsl@cisco.com>

ovsnfv: Disable daily jobs

Change-Id: I88a6c87379ce330a90564bf174258d5e09d75c46
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

fuel, armband: verify jobs: Fix race condition

On rare occasions, Fuel/Armband verify jobs can get into a deadlock
on nodes with exactly 2 executors.
Add a build blocker to prevent such scenarios.

Change-Id: Ia00d88df0dd033264eaeb66e27188c62514b74d8
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

fuel: installer param: Add CI_DEBUG=false

Change-Id: Ic2c4a52d58a7fdced5acfb9a706583646af7e56e
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Changed path of a file to its correct location

Recently htmlize.py was changed to a new directory. So, updated the path
of it in a build script

Change-Id: Ia409a36fdf38e16e9a66b73a07b7a78faaeb88fe
Signed-off-by: Sakala Venkata Krishna Rohit <rohitsakala@gmail.com>

Merge changes from topics 'testapi', 'yamllint'

* changes:
  delete legacy update code
  fix yamllint verify fail

Merge "Get daisy installer IP"

delete legacy update code

update directory was employed to update TestAPI before auto deployment
is adopted, now it is useless and can be deleted.

Change-Id: I4e5ae84e80879cd9f711dc1d02224ae4f5902e49
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

fix yamllint verify fail

fail record: https://build.opnfv.org/ci/job/opnfv-yamllint-verify-master/1050/console

Change-Id: Ic709b9a3d1d3642a3deebd930714a2ba2de22da6
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

bug-fix: do not have permission to execute sudo pip

JIRA: BOTTLENECK-211

This patch is to fix the bug by adding -H flag to sudo, i.e.,
sudo -H pip install ...

Change-Id: Ie31f435e341ae9fe8f8e084696e8e1b7a05888d3
Signed-off-by: Yang Yu <Gabriel.yuyang@huawei.com>

Get daisy installer IP

Now the job functest-daisy-baremetal-daily-master runs on zte-pod3,
but the INSTALLER_IP in [1] belongs to zte-pod2.
Use virsh and arp commands to get the real INSTALLER_IP.

[1] https://build.opnfv.org/ci/view/functest/job/functest-daisy-baremetal-daily-master/151/console

Change-Id: I9e297b8f7a240437f81b4c3e2eab5949ac9d5e51
Signed-off-by: Alex Yang <yangyang1@zte.com.cn>

Merge "Move securedlab clone outside of daisy WORKSPACE"

Merge "Added license metadata to specify Apache-2.0"

Merge "Use absolute timeout for validation jobs"

Merge "Update table headers in the reporting page"

Added license metadata to specify Apache-2.0

Change-Id: Id2e6b148f896eee5122339e501c8604e74ef774c
Signed-off-by: rpaik <rpaik@linuxfoundation.org>

Merge "Enable Yamllint on the Releng Project Repo"

Merge "Fix incorrect comment that security report posted"

joid: Fix build blocker for os and k8 scenarios

Change-Id: Id1fba783069c883868aa9cab6c8ea09485c411e5
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Enable Yamllint on the Releng Project Repo

All new patchsets should be free of yamllint violations.

JIRA: RELENG-254

Change-Id: Ia4f6d201837eb74d0c641b7ffb745c3df4327848
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Change criteria 'SUCCESS' to 'PASS' in yardstick reporting"

Merge "Fix Yamllint violations in Docker Custom jobs"

Merge "Final Yamllint Fixes"