[testapi] Add build parameter to run jenkins job.

opnfv-build-ubuntu-defaults has been added so that the job will run on
build servers which have python verison > 2.6.

Change-Id: Iea2a12da88cc5f7ff625b060425241ab33cc9d85
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Add new jenkins job for unittests"

fuel: Remove colorado jobs and create danube jobs

Obsolete plugin jobs and scripts are also removed.

Change-Id: I16f8d932a492fdd1d8eb2caa5f8bc4aa9183327b
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Add new jenkins job for unittests

JIRA: FUNCTEST-687

Change-Id: I1fd616c32e3185bc6ec452af2c1bd88f46812ec2
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Add docker update builder to jenkins job"

Merge "Add Huawei pod6 and 7"

storperf: Fix GIT_BASE for slave and disable danube daily job

Change-Id: Ia6c544901fb9c7c434104c095b9e2f173f7f5571
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Merge "Clean case declaration prototype"

Merge "[ODL-pipe]Use of the daily suite from Functest"

jjb: infra: bifrost-upload-logs.sh: Copy landing page to the GS server

Moreover, rename 'console.txt' to 'build_log.txt' to make it clearer
what this log is about. Finally, make the webpage title a hyperlink
to the actual Gerrit page.

Change-Id: I251bcd75ac1a559e64e17ba10f7f8b6af069743d
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Use public endpoints in the RC file for compass only"

Merge "jjb: infra: bifrost-upload-logs.sh: Generate a landing page"

Add Huawei pod6 and 7

JIRA: FUNCTEST-693

Change-Id: I134d32045656969ba52c395a95b4d9255a197cc7
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

jjb: infra: bifrost-upload-logs.sh: Generate a landing page

Create a basic web page to contain all the collected build logs. The
reason for creating this page is that the OPNFV web server does not list
the subdirectory contents so we need another way to expose all the
uploaded logs.

Moreover, hide the gsutils stdout output since it just adds extra noise
to the already massive console log. Finally, drop the 'popd' command
argument since it causes the command to fail and mark the whole build
as failed.

Change-Id: Iad25e5cf62fda650bad3c9d83671cde84c7467d8
Signed-off-by: Markos Chandras <mchandras@suse.de>

Enabling StorPerf Daily Job

Move the daily job to execute on slaves labelled as
storperf-pod.
Enable the daily job

Change-Id: I43baca969a7357f5835e0abbcd822d3d001f8d0d
JIRA: STORPERF-87
Signed-off-by: mbeierl <mark.beierl@dell.com>

jjb: infra: bifrost-upload-logs: Fix Google storage variable

BIFROST_GS_STORAGE is an old artifact so replace it with
BIFROST_LOG_URL.

Change-Id: I4b9d56e4b3478850152f7eca9b41b5cc36807049
Signed-off-by: Markos Chandras <mchandras@suse.de>

Clean case declaration prototype

not used in Colorado
angular framework (landing page) could be used for Danube

Change-Id: I86ded631b4c5b78260bd03b376bf6264dabc2f89
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Declare additional huawei PODS

new pods have been declared in the DB
they are used as production pods and may push results to artifact

Change-Id: Ifca4e68b4d8e9fe696142db59e48d255f5b3019c
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "Fix a bug - add requests in virtualenv"

Use public endpoints in the RC file for compass only

Change-Id: Ic6be1e5559653145e6a80442b205533901c0a2bd
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Add docker update builder to jenkins job

JIRA: FUNCTEST-688

Change-Id: I67717f4a7ecfdc0c7bfbb5ed664aa6573c02d463
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "infra: bifrost: Upload build logs to artifacts.opnfv.org"

Merge "propose a class in releng for constants (return values, installer names, ...)"

Merge "Remove colorado jobs and create danube jobs"

Merge "Avoid removing the whole file system"

Merge "bugfix: fail to access testapi swagger"

propose a class in releng for constants (return values, installer names, ...)

JIRA: RELENG-185

Change-Id: Iae566f42b77449778491b83aaf3d72ae120a6dd6
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "implement create scenario and add unittest"

bugfix: fail to access testapi swagger

bugfix [Errno 2] No such file or directory:
'/usr/local/lib/python2.7/dist-packages/opnfv_testapi/tornado_swagger/static/index.html'

Change-Id: Id1cad9a34a3a0331a2f8a0c27c2fa54ca40c7bd6
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Fix a bug - add requests in virtualenv

Change-Id: Iecd20b69f7a3abf04a34d4ee7e9c94f1a039d8b1
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Rebalance master vs. colorado scenario triggers"

implement create scenario and add unittest

JIRA: RELENG-163

Change-Id: Id715a2e5de1022cfd0a745505771d250935541bd
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

[ODL-pipe]Use of the daily suite from Functest

Change-Id: I658f8992f52d7ab5278299c70285cd53d305a0c6
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

[compass] enable healthcheck and vping as smoke test in verify job

Change-Id: I7b4ad69b1c7c7b59b9feadef8808a1ef81a34367
Signed-off-by: meimei <meimei@huawei.com>

Merge "dovetail: separate dovetail jenkins job"

dovetail: separate dovetail jenkins job

JIRA: DOVETAIL-177

Change-Id: Iaa21373ae7f5bbc777872ea9b6ac9479b1dcff08
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Avoid removing the whole file system

If scripts are used by hand and
WORKSPACE is not set then rm -rf /*
will remove the filesystem.

Change-Id: I9bb9ee6643d3916fedc7d3848ecf9b03bde10fae
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

barometer-jjb: fix jobs to not build as root

Change-Id: I4d179400914d985e99f8295c47282d61dbb175cd
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Merge "Revert "[ODL-pipe]Use of the daily suite from Functest""

Revert "[ODL-pipe]Use of the daily suite from Functest"

This reverts commit 8d8493864406132bcc8e84a38a67b5fc3947d566.

Change-Id: I0c1978c87cdee998f4d58754f3e128e51b6e2dc6
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Merge "Add a new installer daisy adapter to modules directory"

[ODL-pipe]Use of the daily suite from Functest

Change-Id: Iee3b50360948352b31c0e63e5ce51e1c2869d4b3
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

infra: bifrost: Upload build logs to artifacts.opnfv.org

Change-Id: I0ba0fe05911dc7ea7cf31286b2f083f85ec5c549
Signed-off-by: Markos Chandras <mchandras@suse.de>

Merge "Add Daisy for reporting"

Add a new installer daisy adapter to modules directory

Change-Id: I9a46665941f8536f08d27a1c6d7e62f2a50ffbc2
Signed-off-by: Jing Sun <sun.jing22@zte.com.cn>

[compass]adapt multi-nics deployment in intel-pod8

Change-Id: I01f755401a724b15b8670e02aa2ebbf1e582952a
Signed-off-by: meimei <meimei@huawei.com>

change from odl_l2 to odl_l3 for cperf runner job

Change-Id: If1546349981520c3b2f0c805da7ea9c7e91724e8
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "utils/jenkins-jnlp-connect.sh: Make sure the pid directory exists"

[FUNCTEST-FUEL] Remove URL swap

Since the virtual deployments are now able to use
the internal mgmt network we remove the swap

Change-Id: I8eed4dd8218a78c697ffde4716c35170fa72d814
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

[Functest] Removing admin to Public enpoint swap

The openstack.creds file is not aligned with commonly
used methodologies.

Change-Id: Iba0afc83ebbe35dd189cc35e5bf682680fc96535
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

utils/jenkins-jnlp-connect.sh: Make sure the pid directory exists

/var/run/ is only writable by root so Monit will fail to create
the necessary subdirectory for the jenkins pid file since we run it
as the 'jenkin' user. We add another entry to the monit configuration
file to check the presence and the permissions of that directory before
we try to start the jenkins slave.

Change-Id: Ica7153c3e90900f60e4f65708c8f08abf5af9201
Signed-off-by: Markos Chandras <mchandras@suse.de>

[Functest][Keystone] --long argument not available anymore

For newton we have to grep differently for the public ip.

Change-Id: I646358005b163829004e0016514e254575d03157
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

Merge "Disable QTIP ci build job"

Merge "add scenario models and framework"

Disable QTIP ci build job

The legacy code is no longer maintained[1]

[1]: https://gerrit.opnfv.org/gerrit/#/c/26783/

Change-Id: Iebbdb0144336c6c0bc2e16f47375f2e61be3bd87
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

dovetail: bugfix of docker save file permission

JIRA: DOVETAIL-176

Change-Id: Idec8ba0c0ab3ba28372cea638315f121c41387b9
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Add Daisy for reporting

Change-Id: Ie9d6d5e351e5d673252f08ed304d4fef96a1e00b
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "Apex: Updates FD.IO scenarios/jobs for Danube"

Merge "[doctor] not to reset verified status with experimental jobs"

Merge "Revert "jjb: infra: bifrost-verify-jobs: Remove triggers due to HW relocation""

[doctor] not to reset verified status with experimental jobs

Change-Id: Icc067b60b18dc9d9d06572b9c2deb103bf4b9529
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Add odl-netvirt-virtual-intel parameters

Change-Id: I2992bda320f7c7b17b554539943713c6dc13d858
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Apex: Updates FD.IO scenarios/jobs for Danube

Change-Id: I9479d3ca047093deeac038d4ca5caf5e69cd8116
Signed-off-by: Tim Rozet <trozet@redhat.com>

Revert "jjb: infra: bifrost-verify-jobs: Remove triggers due to HW relocation"

This reverts commit 24691266ad858494cc06660b9c013af36c548bbd.

The hardware is back online

Change-Id: Ib7d21a5da3e41e4007e1e5363f82a02d2d1c4f0c
Signed-off-by: Markos Chandras <mchandras@suse.de>

Remove colorado jobs and create danube jobs

Danube stream for the projects with daily jobs is disabled.
Danube stream for the projects without daily jobs is left as enabled
as there will be no changes coming to danube branch until branch is created.

Dovetail, Apex and Fuel jobs have not been updated yet.

Change-Id: Ice39826c8f829157fa864370557837290838f634
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

add scenario models and framework

JIRA: RELENG-163

Change-Id: I36a51022c087621d9539dc40f7d9acee4db95dfb
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "doctor: pass project and branch to parameter macro"

Temporary removal of artifact signing

gpg version breaks the script.
a long term solution is in the works

Change-Id: Icd975750c78aa05f769a59b1d40d3f4dc2563209
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

doctor: pass project and branch to parameter macro

The keyword is also replaced.

Change-Id: Ia154975825108ab1e8c336530152757cf732c6eb
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Merge "Fix bug in experimental trigger"

Fix bug in experimental trigger

- missing variable for marco
- renamed trigger since it is not common for other projects

Change-Id: I3dd0f14e6c6525382b04139c5eda2f6e9187a072
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Modify trigger of jenkins job to merged

Change-Id: Ie1213d8573e4151ba2429ebdc1b485ed97f581c7
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Fix path error in jenkins job

Change-Id: I7e1e5e9736c44a53d09378cffe3d85706a1d0826
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Fix bug in jenkins job testapi"

Fix bug in jenkins job testapi

Change-Id: I64987b081f9d39f628278aec692b82afbcd421e4
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Add project parameter in jenkins job testapi

Change-Id: If8ebbf630e62b27da8cc31bae639787e2b599b78
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "utils: jenkins-jnlp-connect.sh: Fix 'started_monit' block indentation"

Merge "Create Jenkins Job for testapi automation"

Merge "cleanup releng-macros"

Merge "Create Test Reporting landing page"

Merge "Update nicknames in swagger spec"

Create Jenkins Job for testapi automation

Right now, only builder for creating testapi doc is included

JIRA: FUNCTEST-664

Change-Id: If0a34154084c1d01ed6b997d2226779da43bcb14
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Update nicknames in swagger spec

Swagger codegen uses nicknames for defining titles in the api
documentation.
Link - https://github.com/OAI/OpenAPI-Specification/blob/master/versions/1.2.md

Change-Id: Ia35718b77dfcac53317384c4445225f28e505919
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Add YAMLLint for static check"

cleanup releng-macros

- sort in execution order

- remove unused macro ('weekly-trigger-disabled')

Change-Id: If72f2554985e8e632ad731c3dc17a23fbc8cd630
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Merge "Add profiler parameter to doctor verify job"

Merge "Fix installation of testapi in virtualenv"

vswitchperf: Utilize more CPU cores during build

Multiple CPU cores will be utilized during build of DPDK,
OVS and QEMU. It will speed up build significantly.
In case of VERIFY and MERGE jobs it can spare about 1/4
of time required for job execution.
Initial setup will use up to 10 cores for daily job,
which is executed on POD dedicated to vsperf project.
In case of VERIFY and MERGE jobs was number of cores
limited to 5 to evaluate impact on other jobs run
in parallel.

Change-Id: Ia0dc8f3d551c84ef2859f233c8442792e0b25c35
Signed-off-by: Martin Klozik <martinx.klozik@intel.com>
Reviewed-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Add YAMLLint for static check

JIRA: OCTO-160

1)Install yamllint first in case pod didn't install. If installed, it would
info "already satisfied".

2)delete virtualenv of releng_yamllint.

Current CI commit gate is simple, just have flake8 check in part of projects,
it's better to apply more check tools to more projects.
Yaml files could be checked by YAMLLint when the project is configed in releng.
YAMLLint does not only check for syntax validity, but for weirdnesses like key
repetition and cosmetic problems such as lines length, trailing spaces, indentation,
etc.

Change-Id: I8591385ed32942e0af7f7afdde435313af5707e5
Signed-off-by: KingPoo <haojingbo@huawei.com>

Merge "Concurrent true for opnfv-yamllint-verify-master"

Merge "Fix compass public vip fetch bug in Newton"

Merge "modify the output message in push-test-log.sh"

Create Test Reporting landing page

JIRA: RELENG-165

In this patch, I do the follow things:
1.deploy tornado server(currently I haven't write any backend code,
since the backend code depend on the testapi and I need to
communicate with Serena).

2.landing page code(almostly finished. But I haven't the data, so
for now, the data this page shows is a mock json. When the testapi
and my backend code ready, this page will finally finished)

3.deployment: supervisor + nginx + tornado + angular

usage:
docker run -itd -p 8000:8000 opnfv/reporting:<tag>

visit landing page:
http://server_ip:8000/reporting/index.html

test api:
http://server_ip:8000/landing-page/filters

visit old reporting page:
http://server_ip:8000/display/master/yardstick/status-apex.html

Change-Id: I527ab2661ce9e84b2942ebe673afbf5f2bc7878f
Signed-off-by: chenjiankun <chenjiankun1@huawei.com>

Add profiler parameter to doctor verify job

See also https://gerrit.opnfv.org/gerrit/#/c/25081/

JIRA: DOCTOR-87
Change-Id: I3d4fea89047be8e57c318df4d39479659e2806a9
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Fix compass public vip fetch bug in Newton

Error log:
More than one endpoint exists with the name 'identity'.
fetch_os_creds.info: public_ip:

Change-Id: Ie7c8eeec5e84de4c38a17b4e718be65f36c562a7
Signed-off-by: QiLiang <liangqi1@huawei.com>

Merge "improve yardstick logger to output Debug info to artifacts"

improve yardstick logger to output Debug info to artifacts

JIRA: RELENG-158

Change-Id: I3bd91c671fa3dcac5cd47ca12610457fd1ab5a5b
Signed-off-by: rexlee8776 <limingjiang@huawei.com>

Concurrent true for opnfv-yamllint-verify-master

this patchset https://gerrit.opnfv.org/gerrit/#/c/26517/10

build logs:

Building remotely on lf-build1 (opnfv-build-centos opnfv-build
opnfv-sysinfo ci-resource) in workspace
/home/jenkins-ci/opnfv/slave_root/workspace/opnfv-yamllint-verify-master

FATAL: The project is configured to NOT run builds concurrent, but the
node parameter [SLAVE_NAME] is configured to trigger new builds
concurrent!
java.lang.IllegalStateException: The project is configured to NOT run
builds concurrent, but the node parameter [SLAVE_NAME] is configured to
trigger new builds concurrent!

linting can be done concurrently

Change-Id: Ied083c3db5c22621af121324ce5264c1851cb31e
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Fix installation of testapi in virtualenv

Ref :- https://openstack.nimeyo.com/87286/openstack-packaging-all-definition-data-files-config-setup

Change-Id: I2519d3930bfeb4d22f92623dcc7ac88e2980b132
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Add yamllint verification of compass4nfv"