[dovetail] generate a results package for testing Dovetail web portal

Change-Id: I3b9f06807ebf581e3f74286f479519937b75b06f
Signed-off-by: xudan <xudan16@huawei.com>

Add l3 suite to list of pybot suites

Change-Id: Iaa085787ea92b002bb9fd1776f2ab20f63996769
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Get latest ODL csit code before running pybot"

Apex: Enable Daily Fraser Dovetail scenarios

Dovetail team still needs this for their next release.

JIRA: APEX-623

Change-Id: Idff3d5119bc0ae902595eb163b56a06c52c0d70b
Signed-off-by: Tim Rozet <trozet@redhat.com>

Get latest ODL csit code before running pybot

Change-Id: Ib502f79d657f8c3f5e7ac333d8487693eb20c4cd
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Apex: Fix stale GS pulls on artifacts

There seems to be some delay in updating the HTTP server for GS which
causes an old version of snapshot to be used. This change replaces using
HTTP with gsutil to ensure we get the latest artifacts

Change-Id: Iccca64aa9e904221621dfb2cb7471d24a3b3f4d9
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "remove inspector variable form job template"

remove inspector variable form job template

Change-Id: I472cad19a8ae81286a62e762c6caab653ca22d7c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Merge "add the ssh_key info if the key_file is exist"

run doctor tests with different inspectors in sequence

As doctor tests have different inspectors, if they run in parallel
of one multijob, they will operator one cloud to create/delete
some resources, such as project, user, network and so on. It will
cause some conflicts.

Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>
Change-Id: I8111b28ad9de409542606f7be39a1ee0d838f8b6

add the ssh_key info if the key_file is exist

Change-Id: I7a95933e254b35fc7b26d649226192b8e4c407bb
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Merge "prepare installer info for doctor test"

prepare installer info for doctor test

Change-Id: I6344a31b28d3e5c9a998693fd64ec255410c62b6
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Merge "use py34 for tox"

use py34 for tox

Change-Id: I606e0de73e153de88d592a36d4eaabf1b4690e6c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

[armband] Disable fraser jobs and vping_ssh verify

- Disabled fraser jobs as we no longer intent to cherry-pick changes to it

- Now healthcheck includes vping_ssh, so remove it as a dedicated test for
verifying patches on gerrit to avoid double checking.

Change-Id: I6620dd9dc7db530ce8cf17474eee9608d78dd382
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

specify the cacert file when it exits

Change-Id: Id122d99d6e599c31d3b5970aa88307843d379515
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

bugfix: wrong usage of '!include-raw'

JIRA: DOCTOR-126

Change-Id: Iabcd8a8ad14079e2ba7e72e39e009a0ee833cb3c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

bugfix: wrong usage of '!include-raw'

Change-Id: Ibbc1363bf5260301b33afad84244aa1d7af4ffce
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

use tox instead of functest for doctor CI jobs

Change-Id: Ifbde5ebd12a7e7a040a0a3b2a3eeed532a11da73
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Merge "[fuel] Remove vping_ssh testcase"

Merge "[dovetail] Querying correct control node IPs"

Merge "[Dovetail] Fixing cinder process name on Fuel"

Merge "Select the right Functest repos when master"

CPERF: Fix log collection

Change-Id: I11a9441b77973fc2225b14b2489b61ebf06a8b6b
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Fix CSIT promotion blocking

Block on 3rd party odl netvirt jobs

Change-Id: Icc67d13f9195ae3d62c77a909ee8e504c090bd40
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "CPERF: Adds log collecting job"

CPERF: Adds log collecting job

Makes it so logs will always be collected even when CSIT itself fails.

Change-Id: Ie854d92950edb515141343fd8b26216a010c55b4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Select the right Functest repos when master

Else OpenStack Rocky is verified by Queens upper-contraints.

Change-Id: I5bfcb4895e64ab911c1131e8bfeb09eac2775754
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

[compass4nfv] Change the network yaml for odl scenario

Use network_odl.yml for odl scenarios.

Change-Id: Ic12863acda112ed6ca7b39e83a820733e207729d
Signed-off-by: Harry Huang <huangxiangyu5@huawei.com>

CPERF: Update netvirt verify tests

Changes-Include:
 - Disable functest (we only care about csit passing for netvirt)
 - Fix trigger of csit job for other snapshot versions (always use
   master for now)
 - Fix csit always returning 0 even when tests fail

Change-Id: I30a51fa391aac692b122f1ebf7bf73ffdb61ca29
Signed-off-by: Tim Rozet <trozet@redhat.com>

CPERF: Disable host key check with ansible

Also minor debug statements for snap deploy

Change-Id: I9a6c2744ac9b9da920666f84c05e46af858613e6
Signed-off-by: Tim Rozet <trozet@redhat.com>

[fuel] Remove vping_ssh testcase

Now healthcheck includes vping_ssh, so remove it as a dedicated test
for verifying patches on gerrit to avoid double checking.

Change-Id: I4daec677e7d1fdc65997f7a9ab580d5f93ece8a8
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>

[dovetail] Querying correct control node IPs

The parameter used to query the host IPs of the database and message
queue hosts was wrong, resulting in the corresponding HA tests to fail.

Change-Id: I460209c63928ac99d5449adba03474fdf066ebcf
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Use computes + control for NUM_OS_SYSTEM

This is not going to work when we want to make our HA
CSIT work, since I think Apex will be having 3
openstack control nodes, and our CSIT won't know what
to do with '5' (3 control + 2 compute) openstack
nodes. But, we can cross that bridge when we get
there.

Change-Id: I9c74b2ec73e5af0039d93f9ed812fc3c100a3e4a
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

CPERF: fix flavor syntax for csit

Change-Id: Id3430db201ba82b398c3e74f5c3cbb541c6fb208
Signed-off-by: Tim Rozet <trozet@redhat.com>

CPERF: Create flavor for CSIT

Change-Id: I2dd2fe40f06783320c60788b2161e876a0bb43b5
Signed-off-by: Tim Rozet <trozet@redhat.com>

CPERF: Fix cirros image name for csit

Change-Id: I61ffe3d058ff797878d2ef00e5801497f91ea436
Signed-off-by: Tim Rozet <trozet@redhat.com>

CPERF: Fix path issue with cirros uploading

Change-Id: Ia58fcaae637d9be75b331404648724b82ac16498
Signed-off-by: Tim Rozet <trozet@redhat.com>

[Dovetail] Fixing cinder process name on Fuel

Fixing the process name of Cinder on Fuel deployments.

JIRA: DOVETAIL-688

Change-Id: Ide672e6bafedeecc6b99a99263147fec5fab44ef
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

CPERF: Upload cirros image for CSIT

CSIT does not have the ability to upload cirros image yet, so this patch
uploads it to the overcloud as a workaround.

Change-Id: I277e37ae28d613771969dca984ef8692e1312fbd
Signed-off-by: Tim Rozet <trozet@redhat.com>

Log where the robot files are being uploaded to

Change-Id: I4f933d18c47fff80923d3d79320f0bb873efb2e7
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Upload robot logs to gs

Change-Id: I78989fcfd155054d8470359c59f682eb4ba3ea80
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

CPERF: minor fixes to csit

Change-Id: I16b4859922a6efec2748190234967409b61c1f68
Signed-off-by: Tim Rozet <trozet@redhat.com>

CPERF: Fix cleaning cloned folder

Change-Id: Ie933308557023877b19e43bbde95470c2bf159ca
Signed-off-by: Tim Rozet <trozet@redhat.com>

Cperf: Add debug messages to execution

Change-Id: I2089414e0fd2151b53da29ea01de3dd1292c078e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Fix invoking snapshot node parser

Change-Id: I12da71b17a0a423b501508b51ab3d614c87f8851
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Correct functest container with snapshot

If OS_VERSION is master we want to pull ollivier containers, otherwise
we can pull OPNFV.

Change-Id: I6e838a85c6b7918540c8bc3ca2d5e790e5aa7a57
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: fix overcloudrc unsetting OS_VERSION

Sourcing overcloudrc is unsetting OS_VERSION causing failures in csit
job:
https://build.opnfv.org/ci/job/cperf-apex-csit-master/1/console

Change-Id: Ife3b4795832ecdad75bcb41f0721ef8391aafcac
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: run csit before tempest

Change-Id: I66c0b128fb958285b4bff112586fc45366257256
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Remove snapshot workarounds

There's no need to install java or do the docker workaround anymore
after fixes into Apex:
https://gerrit.opnfv.org/gerrit/#/c/60053/

Change-Id: I3d7d5fcc066bfb4416fcd3404c89e6e814dbf31e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Change default verify scenario

Since our default scenario os-nosdn-nofeature-ha is failing functest in
verify, switch to os-nosdn-nofeature-noha which is passing. We want the
lowest bar possible for initial patch set verification and then can use
gate to verify more complicated deployments.

Change-Id: I9788495de5ee728fa3c19264120315e562d2712d
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "[Dovetail] Bugfix: Dovetail CI jobs failed on compass"

Apex: Removes branch from functest scenario

Branch is messing up functest detection of deploy scenarios. Therefore
this patch removes the branch from the scenario before passing it to the
test job.

Change-Id: I1b59125941e839f1937cba565c73e39efb460573
Signed-off-by: Tim Rozet <trozet@redhat.com>

[Dovetail] Bugfix: Dovetail CI jobs failed on compass

Change-Id: I1b46fe380b12552651c786b10f162111d4605353
Signed-off-by: xudan <xudan16@huawei.com>

Apex: Fix OS branch detection on snapshot promotion

Change-Id: I4f860f9b9adcc96d94b1daa333eec7a746bc91b1
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: More snapshot fixes

Changes-Include:
 - Use correct csit env file with promote jobs
 - Ensure odl container starts when snapshots brought up
 - Use SDN_CONTROLLER_PASSWORD for ODL pass rather than
   hardcoding admin

Change-Id: I910a4eefa2b4c621e3f82939bedee338fad91bf3
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Update CI Resources and Requirements"

Merge "[Dovetail] Edit the job's name of Dovetail running on Apex"

[Dovetail] Edit the job's name of Dovetail on Fuel

Change-Id: I6a2b571ca2696f9466a4588b7e4deef13b947eae
Signed-off-by: xudan <xudan16@huawei.com>

[Dovetail] Edit the job's name of Dovetail running on Apex

Change-Id: I92b8bbef1a979c16a9c62f1affe43817214936a4
Signed-off-by: xudan <xudan16@huawei.com>

Merge "[dovetail] Run mandatory and optional test cases with 2 jobs"

Merge "[dovetail] Add TESTAREA to support run mandatory or optional test cases"

Merge "[Dovetail] process name configuration for HA test cases on Fuel"

Merge "[dovetail-webportal] Edit verify job"

Apex: change detect script to just include-raw

Change-Id: I2366cbaba46734877782951365a4abebca9d17b8
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Fix snapshot scenario detection

Change-Id: I4b18d441ebc4f9b9ac8c8c67415b8817f3091ee9
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Ensure docker prunning can be done"

Merge "Run ODL CSIT on Apex from Cperf container"

Run ODL CSIT on Apex from Cperf container

This patch adds the ability to deploy a cperf container and execute ODL
csit against an OPNFV deployment with ODL. The cperf job to execute csit
requires an RC file, SSH key to access OPNFV nodes, and a yaml
descriptor file that contains per node information about each
control/compute node.

This patch also adds triggering the cperf CSIT job inside of the 3rd
party ODL netvirt verification suite. That job uses Apex snapshots to
bring up deployment (no undercloud).

Additionally this patch includes some changes to allow multi version
snapshots to work. Multiple snapshots are now being created for
different OpenStack branches along with noha or HA type topologies. This
patch includes the ability to detect the desired scenario as triggered
by ODL Netvirt gerrit. Now in ODL netvirt gerrit a user may provide:
"check-opnfv <OS version>-<noha|ha>" style syntax to initiate 3rd Party
OPNFV CI on a particular OS version/HA setup.

Change-Id: I51a27545c985ce74c1c72fe0933eb451939a8c05
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>
Signed-off-by: Tim Rozet <trozet@redhat.com>
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Apex: add k8s deployment to daily

Change-Id: I01ac2d25615f189851bc033d156aacc155233913
Signed-off-by: Tim Rozet <trozet@redhat.com>

[dovetail] Run mandatory and optional test cases with 2 jobs

JIRA: DOVETAIL-694

Change-Id: I19928d57c14f99e5c3ed7725fbe3476096b1674c
Signed-off-by: xudan <xudan16@huawei.com>

[dovetail] Add TESTAREA to support run mandatory or optional test cases

JIRA: DOVETAIL-694

Change-Id: I4d2f4342bb10b5199c0dd1ed6ee579df14cb1517
Signed-off-by: xudan <xudan16@huawei.com>

[dovetail-webportal] Edit verify job

Set the verify job of the webportal to be 'echo hello world' temporarily.

Change-Id: Ib9c749572a629595593405fba6ae275d2dc90563
Signed-off-by: xudan <xudan16@huawei.com>

Merge "Add verify jobs for new repo dovetail-webportal"

Merge "[dovetail-webportal] Add docker build jobs for dovetail-webportal"

Apex: Disable fraser daily

Change-Id: Iad2503baca32175ff912c85dccd71791fc8156ff
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Update blocking for csit promotion job

Ensure only one csit promotion job runs on a node at
a time.

Change-Id: Iab36f267f880347e0090fd87b91c9d7e28fbc4f4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Apex: Allow for  multi-version snapshots"

Apex: Allow for  multi-version snapshots

This patch adds ability to manage multiple snapshot versions. We want to
be able to have snapshots for noha and ha for multiple OS releases. This
adds that capability and updates the deploy script to be able to deploy
them. Also a user can specify which scenario to trigger with his ODL
netvirt commit by doing 'opnfv-check <os version>-<ha|noha>

Change-Id: I3884b41c86b55c187becfb83ef62f3431724d09e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "unh-pod1: disable trigger for deploying auto"

Ensure docker prunning can be done

Sometimes the docker build fails and the docker process hangs on a container,
withouth being able to stop it. This causes spurious failures on other builds
that shouldn't fail. The prune job should cleanup the hanging containers and
images, but it fails when the docker process is hanged.

This change adds a docker restart to the prune job, in order to assure that the
hanged container is shut down and can be removed.

JIRA: ARMBAND-358

Change-Id: I9d04fa1099a6fc53bf773a2eba33be89db7d0aa1
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

[dovetail-webportal] Add docker build jobs for dovetail-webportal

Add 2 docker build jobs for the new repo dovetail-webportal.
One is dovetail-webportal-api, the other is dovetail-webportal-web.
Once there is a new patch merged, it will auto trigger the jobs to build
and upload the new docker images with tag 'latest'.
According to the Dovetail release plan and develpoment of the web, can tag
this repo and release with certain tag (e.g. ovp.2.0.0)

JIRA: DOVETAIL-671

Change-Id: I1becc084617bb52f8c8e23275202bd7be4a7b2b3
Signed-off-by: xudan <xudan16@huawei.com>

Merge "Update Functest testcase list per tier"

unh-pod1: disable trigger for deploying auto

Change-Id: I364ff339db7132b6a2ca31d15b6340542b6a9226
Signed-off-by: Paul Vaduva <Paul.Vaduva@enea.com>

Update CI Resources and Requirements

Indicates what requirements each resource type should meet in order to
be considered part of OPNFV CI along with listing of the resources
available.

Includes a list of labels applied to servers and their intended use.

JIRA: RELENG-403
Change-Id: I0ba2671e95e29141d051019938fba930a42e7f56
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

[Dovetail] process name configuration for HA test cases on Fuel

In a Fuel deployment, the control processes are distributed across
multiple VMs and the HA test cases need to know where to find which
process.

JIRA: DOVETAIL-688

Change-Id: Ib20f6ab117aa83d148f9e1a351a4f94ec1192146
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update Functest testcase list per tier

Change-Id: I905527d509597218927908be7752ca16b6ea2cc5
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

[compass4nfv] remove vping suite from verify

functest healthcheck include the vping, so we can remove this suite.

Change-Id: Ifc5f9e2195a9d31713f6e2c2ce47642dc7855855
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Add verify jobs for new repo dovetail-webportal

JIRA: DOVETAIL-671

Change-Id: I4e55123f211f91f9e783d741251bc1fd9df62b85
Signed-off-by: xudan <xudan16@huawei.com>

Merge "jjb/releng: fix partial image name matching"

Merge "[release] Fuel, Armband: Release opnfv-6.2.1"

jjb/releng: fix partial image name matching

Docker image building script opnfv-docker.sh tries to remove existing
images before and after building. It simply uses grep to matching image
names, which may cause partial name matching problems.
Ex. opnfv/compass-tasks will match both opnfv/compass-tasks and
opnfv/compass-tasks-base, and may lead to accidentally removing of
images still in use when several building tasks run concurrently.

Error log:
https://build.opnfv.org/ci/job/compass-tasks-build-arm64-master/6/console

Change-Id: I1a83f801c5e0cc889cd9e17b8d1b4d895f1f68a9
Signed-off-by: Yibo Cai <yibo.cai@arm.com>

[release] Fuel, Armband: Release opnfv-6.2.1

Change-Id: Ic3e0be0f031408146ceead3130850650e6bde125
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Tagging FDS for Fraser 6.2.0

Change-Id: Idebf9d0d49ef9d57901615ddf15595545031f093
Signed-off-by: Onong Tayeng <otayeng@cisco.com>

Merge "Tagging Bottlenecks F release 6.2"

Merge "Fraser Tagging: 6.2.0"

Merge "[yardstick] fraser opnfv-6.2.1 release tag"

Fraser Tagging: 6.2.0

vswitchperf tagging.

Change-Id: I93a7d97e89d493b2ace9bf2c00b1932a89bab772
Signed-off-by: Sridhar K. N. Rao <sridhar.rao@spirent.com>

Tagging Bottlenecks F release 6.2

Change-Id: I7df15a89379ce0e30eba0bd00ae9fbb76056970d
Signed-off-by: Yang (Gabriel) Yu <Gabriel.yuyang@huawei.com>