CSIT: Fixes zip2tar conversion for ODL artifact

File modes were not being preserved using the python tool, hence
manually unpacking and re-packing now into tar.gz

Change-Id: I40289117ec74ea2717a2428e9542da3dc98f590e
Signed-off-by: Tim Rozet <trozet@redhat.com>

CSIT: Fixes permissions with sdnvpn odl_reinstaller

This is a temporary fix that should be removed when
fixed in sdnvpn repo.

Change-Id: I13f247090e72a625db3af932652e006a57418e1e
Signed-off-by: Tim Rozet <trozet@redhat.com>

CSIT: removes dir prefix on NETVIRT_ARTIFACT

Change-Id: I4d046d2be7342e7bf4b19e930dfa3c8f9dea8e79
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex,CSIT: changes pip3 to use just pip

Change-Id: I0c8adbca67e5f2235bb2d48c19edc0f96400faab
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex,CSIT: Fixes slaves and other bugs

Changes Include:
 - Fixes phase jobs to run on the same node
 - Removes using WORKSPACE/.tmp dir for unpacking snapshot since other
   phase jobs will need access to these files.  Now just unpacks to cache
   directory
 - Fixes download for ODL.  The previous way ODL was being downloaded
   was only if a manual patch-set job was run on the ODL gerrit.  This
   patch changes the download to use the zip artifact automatically
   produced.
 - The zip artifact is converted to tar.gz and stored in /tmp/ for the
   install job to consume. Note: the conversion is done because the
   odl-pipeline install scripts only currently accept tar.gz.
 - Extra checks in install job to make sure required files exist and
   have been previously unpacked by deploy job.

Change-Id: I38aad98cac247eb4af2839811388b119079bc7ba
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Change automation to original testresults server"

Change automation to original testresults server

Changed port from 8711 to 8082 and auto to test in url. There are 3
successful builds.

https://build.opnfv.org/ci/job/testapi-automate-master/

Change-Id: I099b026eb22c7d95d8bf7345837e7c2234ef571d
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Apex: Fixes CSIT snapshot deploy script"

Apex: Fixes CSIT snapshot deploy script

Change-Id: I84d3a485594e9ca4c6e0230f2243458fe4450f40
Signed-off-by: Tim Rozet <trozet@redhat.com>

Changing trigger to weekly for backup mongodb job

Change-Id: Ib3c0cb13dbab2d8c6f8b7fd2219900b32d153b8e
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Bug fix type name and add parameter values

Change-Id: Idfa76608e796d9e27bbed4a351d16018e9380c59
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Add parameters and change trigger to change-merged"

Merge "update scenario and related unittest"

Merge "Document experimental jobs"

Merge "Add jobs to build arm functest images"

Merge "Use the aarch64 image for functest"

Apex,3rd_party: Fix workspace wiping

Workspace wiping was done in builders, which can be removed in favor of
wiping workspace via the 'scm' entry in the job.  For now we point at
apex since we require apex repo to clean the host properly.  We also
need sdnvpn for the python code to upgrade ODL.  Since we can only use a
single scm at a time, we use apex in the jjb, and then manually clone
sdnvpn in the builders that require it.

Change-Id: I52274fc8fdd6b6c052e396c2a63dab5abcbf764e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Add parameters and change trigger to change-merged

Trigger is changed to change-merged for testing and will be reverted to
weekly once there is a successful build

Change-Id: I99a7f49e3d05e4915f1a2dd225fcf4ffde312df3
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "Apex: fixes missing GS_URL for CSIT"

Merge changes from topics 'deployment_handler_refactor', 'deployment_handler'

* changes:
  [deployment handler] Refactor the old installer_handler
  [deployment_handler] Remove current scripts

Apex: fixes missing GS_URL for CSIT

Change-Id: I059daa067b4aba9f680a63b0a5ec535164fb05d3
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Revert include-raw-escape to include-raw"

Apex: fixes gate job param passing

Change-Id: I81bd36ce085d373ecd986a453cde8d45f179a7fb
Signed-off-by: Tim Rozet <trozet@redhat.com>

Use the aarch64 image for functest

An aarch64 image was created for functest in
https://gerrit.opnfv.org/gerrit/#/c/27801/
This image is build and pushed with
https://gerrit.opnfv.org/gerrit/#/c/28291/

In this commit, the aarch64 image is pulled when an aarch64
jenkins slave is used for running functest.

JIRA: ARMBAND-180

Change-Id: Idfe7115275a056ef5137cff0a963910c2707457c
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Revert include-raw-escape to include-raw

Otherwise, we saw functions definition in shell script to be
fold by double bracket, not single as expected.

Change-Id: I1924d261f6d8313afa5cf70d173374840e5394db
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

Merge "Added VNF_Catalogue Server"

Add jobs to build arm functest images

Jenkins slave arm-build3 was added to build the docker image on arm
This commit adds jobs to use that jenkins slave.

JIRA: ARMBAND-108

Change-Id: I7b293d119ca3347983940639fe0cfea1098b18f3
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Merge "Move the compass centos job to intel-pod8"

Move the compass centos job to intel-pod8

We fixed the issue of accessing database failed on intel-pod8.
Some problem happened in Huawei Munich Lab.So we move the CI job to this pod.

Change-Id: Iefddcf2bef2cc296b1abd2d224b78c6dbc522295
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Added VNF_Catalogue Server

Change-Id: I45cedac46f06e6e1f080dd3bc38d6f79eec37fa6
Signed-off-by: Kumar Rishabh <shailrishabh@gmail.com>

Apex: fixes issue with detecting proper gate scenario

Change-Id: I5aaf203f3db5078e462007c78aa9ff13d102c70c
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "[qtip] Add experimental task"

Apex: fixes csit snap upload

Change-Id: Ideb6302df40cae35637d9d764a7811532cf46d7b
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "jjb: infra: bifrost-verify.sh: Always print the GS URL"

Apex: csit snapshot create more perms fixes

Change-Id: I8143a664a7d9829a048df2603df281ee78dda937
Signed-off-by: Tim Rozet <trozet@redhat.com>

vsperf: replace intel-pod3 by intel-pod12

Intel POD dedicated to VSPERF was moved to new location
and renamed to Intel POD 12.

Change-Id: I98a2204de90f6a491edb9e378da46600d4f29978
Signed-off-by: Martin Klozik <martinx.klozik@intel.com>
Reviewed-by: Aric Gardner <agardner@linuxfoundation.org>
Reviewed-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Apex: removes files touched with by root in workspace for csit

Change-Id: I5e97a617a1e205ab7827b362d7e46e5f1792a578
Signed-off-by: Tim Rozet <trozet@redhat.com>

Apex: Adds gate scenario job

Apex needs a way to run a gate job after basic scenarios (nosdn,
odl-nofeature) pass.  We need the capability to specify which scenario
should be the gate.  This patch allows us via a comment to specify
'start-gate-scenario: <scenario>' which will start a gate job to
validate that scenario deploys and passes basic functest health check.

Some drawbacks of this approach include only being able to validate a
single scenario per comment + gerrit votes overriding (not true
workflow/pipeline plugin).  The positive is this is a fairly small CI
change to enable some much needed verification.  It will be the Apex
committers responsibility to issue this comment post Jenkins +1 approval
of pre-gate.

Change-Id: I9a1364bb1cece8b35488d496789a5e83c707b32d
Signed-off-by: Tim Rozet <trozet@redhat.com>

[deployment handler] Refactor the old installer_handler

This is a util library to interact with the
deployment regardless of the installer.

Objects:
  - Deployment
  - Node
  - DeploymentHandler
     - ApexAdapter
     - FuelAdapter
  - Factory

The installer adapters implement some of the
abstract functions of DeploymentHandler class
that can't be generalized.

Printout of example.py:
http://pastebin.com/raw/SF3A1fee

More info: JIRA: RELENG-149

Change-Id: I5c9e94459d5be0bfad6ffac29908a8cfc7ba919c
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Merge "[fuel] Align master jobs schedule"

update scenario and related unittest

JIRA: RELENG-163

Change-Id: I137898dc84de5f8cb6cab5de9b4ac5de5e4bb978
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

[fuel] Align master jobs schedule

- activate baremetal runs
- disable onos related runs (plugin ain't ready yet)

Change-Id: I89c9cc0a9eafeff698112cdfb4654f4f7852d014
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>

Add huawei-pod12 (used for JOID) in ci-production list

Change-Id: Icf5b89e608d604fb0fec3369b680db9e341b2b35
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "dovetail: branch parameter bugfix"

Apex: More fixes to csit snapshot create

Change-Id: I210e5148c8058488edab6f26ece42b011e0e618d
Signed-off-by: Tim Rozet <trozet@redhat.com>

dovetail: branch parameter bugfix

JIRA: DOVETAIL-180

Change-Id: Ia1e448c5802693c635bc4ca347df3defb9e1e3b4
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

[qtip] Add experimental task

Change-Id: I26a2296eb216fae738d4e749410810bff2072e25
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Merge "openretriever: verify job added and document check"

Merge "[opera] set timeout of daily building job as 240min"

Merge "[bugfix] wrong regular expression to fetch controller ip by hostname"

[opera] set timeout of daily building job as 240min

Change-Id: Ie323aa771f2348d99eacbf5115c1503e69576ab7
Signed-off-by: meimei <meimei@huawei.com>

Apex: fixes missing sudo on route cmd for csit

Change-Id: Iffb93175cc253a471530571662a5b8fb3a00ff88
Signed-off-by: Tim Rozet <trozet@redhat.com>

[bugfix] wrong regular expression to fetch controller ip by hostname

Change-Id: Idcf6739498837e828dd65897f599dada720fb48e
Signed-off-by: meimei <meimei@huawei.com>

qtip is using 'gerrit-trigger-change-merged'

Need to add it back from the last revert

Change-Id: Ibc2f225c94121e89cc1db1b03b085e588b5a732c
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>

Revert "Add new jobs for doc merge and verify"

This reverts commit fd8d915b212fb8adc943a74b537b5b5efffeaaad.

Change-Id: I9e56196f2ac84b72af2f9b51bbcd663fdc4e02c3

Apex: adds host route for csit jobs

This route will let functest container access floating IPs on the
overcloud when virtual deployments are used.

Change-Id: I9c63239d4d224a141538e9d6f203f4902fe8752e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Fix verify job failure

https://gerrit.opnfv.org/gerrit/#/c/27629/ missed the qtip
jobs and caused verify job to fail with
https://build.opnfv.org/ci/job/releng-verify-jjb/900/console

Change-Id: Id9883edb98cc2e7f3fcb8623aeadebfb653f484b
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Merge "Remove email publisher from jenkins job"

Merge "Add new jobs for doc merge and verify"

Merge "Update new slave tag"

Merge "[Functest] Add push-logs to functest-suite job"

Add new jobs for doc merge and verify

New jobs for merge and verify added in tandem to ODLDocs.  Intent of
keeping these doc jobs  between ODL & OPNFV as similar as possible is
to keep the scope for common jobs and cross collaboration possible.
The archiving feature that is included in post build configuration of
ODLDoc jobs has been left out for now until CI Team can take it up.

Change-Id: Ifb494f1491f07ad0af39cd2644f895372b98edf3
Signed-off-by: ShubhamRathi <shubhamiiitbackup@gmail.com>

KVMFORNFV: Uploading logs to artifacts.

This patch includes script updates/corrections to upload the artifacts
based on Job type and phase.

Change-Id: I817f9a0cc9a2850759743a72f0db7d2c342360f1
Signed-off-by: Gundarapu Kalyan Reddy <reddyx.gundarapu@intel.com>

Merge "Refactor Daisy verify jobs"

Merge "Add daisy installer default parameters"

Merge "Refactoring daisy CI Jobs"

Merge "Use parameters in cli for deploy.sh"

Merge "Add docker build for escalator"

Merge "Update on Functest reporting processing"

Update new slave tag

The jenkins slave arm-build2 was retagged from opnfv-build-arm
to opnfv-build-enea. This change was made to avoid confusion, as
this slave is an x86 machine building an iso that is used by armband

Change-Id: Iac4e9bf635c128070c32818874626a81a28e6cf7
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Merge "dovetail: bugfix of parameter name"

Merge "send notifications to company email"

dovetail: bugfix of parameter name

JIRA: DOVETAIL-180

Change-Id: I63c8108cb86dcf810b60648ce3f0eddd70f9cd68
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Merge "Deprecate legacy test task"

Merge "Refactor qtip jobs"

Remove email publisher from jenkins job

Sending emails for verify jenkins job is unnecessary

Change-Id: I44eaadc7cee1d6a8f6a29fc269279f3acd98c71f
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

undo publishing the ansible.log

- we already redirect all the logs of ansible, so publishing ansible.log is unnesesaary

Change-Id: Ic3daf59a379512ac370739aff292509f81fa697c
Signed-off-by: meimei <meimei@huawei.com>

send notifications to company email

Change-Id: I678bdea2ff553a898135f36f9d0e1b0ca5ba8a98
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "Adding POSCA build job for Bottlenecks"

Merge "keep weekly-trigger-disabled and enable compass-dovetail weekly trigger"

Merge "KVMFORNFV: Uploading logs to artifacts for debugging."

KVMFORNFV: Uploading logs to artifacts for debugging.

This patch includes updated scripts for uploading kvmfornfv test
logs(example:ftrace logs) to artifacts for future debugging if needed.

Change-Id: I078169fc777de93cb2706bb07d77520da7527d73
Signed-off-by: Gundarapu Kalyan Reddy <reddyx.gundarapu@intel.com>

Merge "Add GIT_BASE parameter in a phase job."

[Functest] Add push-logs to functest-suite job

Functest suite is used now by different projects
for verify jobs for example. Some of these jobs
would like to have the logs in artifacts for
further troubleshooting.

Change-Id: I2e0c2d9539c2e195a5c4fb6c4708d82e512adf94
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Apex: fixes snapshot create RC files

Change-Id: I769bf1f4f6d0c399769422bc7a84a171c295cf2c
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "bifrost: Destroy all VMs from the slave nodes"

Merge "[APEX][BGPVPN] Add to bgpvpn to apex-daily"

KVMFORNFV: Enabling triggers for kvm OVS+DPDK+BAROMETER scenario.

This patch includes implementation of jobs and triggers for
kvmfornfv ovs+dpdk+barometer HA scenario test case.

Change-Id: I1b8e4a660f18b479631ea30df80d66c0d75a1bcd
Signed-off-by: Navya Bathula <navyax.bathula@intel.com>

bifrost: Destroy all VMs from the slave nodes

New patchsets may introduce (or remove) testing VMs so make sure the
script destroys all of them

Change-Id: Ic96142823b9a8b044306327ce3454fbdc6fa5eb4
Signed-off-by: Markos Chandras <mchandras@suse.de>

openretriever: verify job added and document check

1, verify job added
2, put into document check cfg file

Change-Id: I3f6ce78653aab789ccdc0a11f36c1b6e735ae3cc
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Refactor Daisy verify jobs

remove unused jobs, such as basic, test, deploy and keep only build job.

Change-Id: I1639882f1bf5249f404d3fe6db69443a2a997f89
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Add daisy installer default parameters

Add default settings for installer and slaves
Use baremetal deployment for daily
Use virtual deployment for merge

JIRA: DAISY-27

Change-Id: Ia00343225656c02aa292ee89d153f2e047c994b0
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Add GIT_BASE parameter in a phase job.

This parameter is missed because there was no macro as
testresults-defaults.

Change-Id: I79e506943cfaab6568419b51c09981fd313522c6
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Refactoring daisy CI Jobs

Refactoring for:
1. Delete unuseful jobs;
does nothing but echo;
2. Daily build and Daily deployment jobs are missing;
3. Change include-raw-escape including multiple files into multiple
include-raw-escape for better troubleshooting;

JIRA: DAISY-25
JIRA: DAISY-26, fixed by add period building job

Change-Id: I3a1fc64f6416546b5bd1a7730629ad5ed88140b1
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

[deployment_handler] Remove current scripts

This work has been done from scratch following
a better OO approach and better structured.

The library is renamed by 'deploment handler'

Change-Id: I7af2963ebb4e33d90481e91cabfc015718b0bb68
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Add pre-defined parameter for a phase job

The currentparameters for two phase jobs is set to true so that they run
on opnfv-build-ubuntu defaults and the second phase job has a
pre-defined parameter as it is to be run on testresults

Change-Id: Id5feb94f407d29f6a3d5aa88d321666f3ff463b5
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Merge "prototypes: bifrost: Drop the entire ironic database"

Merge "Changed parameters in phase jobs"

Changed parameters in phase jobs

This is done so that the parameters of the prevuious phase jobs are not
carried forward to next phase jobs

Change-Id: I91a068c75fe1658b3ca104613d3d59a6b82508e9
Signed-off-by: rohitsakala <rohitsakala@gmail.com>

Change testresults url to auto testresults url

The url is being changed to auto because the auto testresults website is
updated and the api-docs should be in sync with the testresults website.

Note - The auto testresults is created temporarily.

Change-Id: If2428511c46183bd57b1a466fbdd04786528b103
Signed-off-by: rohitsakala <rohitsakala@gmail.com>