Merge "Propose Yolanda Robla Mota as new committer to Releng"

Armband: Verify: Removed upstream folder from forbidden file paths

"forbidden-file-paths" prevents verify from running for patches that
alter that dir so it was necessary to remove "upstream" ANT
configuration completely

Change-Id: I6c1f00fe500548695284ad1e947cb35bdce14c3e
Signed-off-by: Andrei Varvara <andrei.varvara@enea.com>

Propose Yolanda Robla Mota as new committer to Releng

Change-Id: Id7699db3beb50c1e2cdea3affd4f7b052f28596e
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Fix perms and sed for bridge_name

Change-Id: I0b2b6e31a456398958bf1997ed6f6394322191c8
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Start using centos7 instead of centos-minimal

Current builds with centos-minimal are failing on 7,
so start using centos7 element instead.

Change-Id: I80d986fd7613e1807a119447a01c62e6f8a93ddf
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Add step to customize create bridge template

Change-Id: I0f4e7353773291e810f70059e4a015ac641bd2c8
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Fix automated job to properly create the bridge

The element that creates the bridge was moved from file
to template. But in the case of VMs we are not running puppet
to install bifrost, so that is not applied. Manually place the
file in the right path, and replace the bridge name with the
expected br_opnfv.

Change-Id: I22b2213b529343b24c358b3c80fd1849ec40979c
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

playbooks: Do not serialize ironic deployment

[This is similar to upstream https://review.openstack.org/389079]

This somewhat reverts 0a82e3d8d29f85229e1ed29d90de47346bc1d9b1
("Serialize localhost actions during final host deployment").
The only point where we want to serialize the steps is when accessing
common files on the host. In the bifrost-deploy-nodes-dynamic role,
all tasks are accessing files based on the 'inventory_hostname'
variable, which means there is no conflict there and tasks on these
role can run in parallel. This allows bifrost to provision machines
in parallel during pxe boot which speeds up the entire operation.

Change-Id: I64b1f2832c333c89e33e8f9d19f03e4d653d74b4
Signed-off-by: Markos Chandras <mchandras@suse.de>

Armband: Verify: Fix build params, tree paths

Armband tree has ci, patches and upstream as folders.
Updated the releng armband-verify-jobs.yml with the right
paths.

While replicating Fuel@OPNFV behavior, one default set of parameters
was left pointing to x86 build defaults (opnfv-build-defaults),
instead of opnfv-build-arm-defaults.

JIRA: ARMBAND-99

Change-Id: I4a0ec09b6188ef4c7f06d2f0c0ddcb13ca9ad72f
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
Signed-off-by: Andrei Varvara <andrei.varvara@enea.com>

Armband: Verify: Don't enable virtual-deploy yet

While at it, add missing exec flag to one sh script, and cleanup
some obsolete debug logs.

Change-Id: Ib805e41177571f6413ed744edae405449c86412e
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "Add verify jobs for Armband"

Merge "Trigger test unit execution on verify + Published for jenkins"

Merge "predefined-parameters complement for daisy verify jobs"

Merge "Refactor SSHUtils"

[Yardstick] Add default DB_BACKEND for virtual pod

JIRA: YARDSTICK-357

Change-Id: I5a6e77366733e1a871c8f1574d15996456ec080d
Signed-off-by: JingLu5 <lvjing5@huawei.com>

Add verify jobs for Armband

This patch is similar to what releng/jjb/fuel does for
verifying build and deploy.

JIRA: ARMBAND-99

Change-Id: Ic6524e921acf458b55fbbb3453638c5fc30db15c
Signed-off-by: Andrei Varvara <andrei.varvara@enea.com>

predefined-parameters complement for daisy verify jobs

Try to solve "Error fetching remote repo 'origin' GERRIT_REFSPEC"
problem.

Change-Id: I0631be6cced09aa816afab9471c1351e69a5bda7
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

[qtip]update qtip ci job

1. Creat qtip ci job on zte-pod3
2. Reschedule time on zte-pod2

JIRA: QTIP-138

Change-Id: I5805e976e72c898e761f440833bfde42b37bba42
Signed-off-by: wu.zhihui <wu.zhihui1@zte.com.cn>

Merge "[compass] fix concurrency issues of ci jobs"

[compass] fix concurrency issues of ci jobs

JIRA: COMPASS-494

Change-Id: I7cffad73976cd33974df4fe66e6a30e67df962c1
Signed-off-by: QiLiang <liangqi1@huawei.com>

Merge "Upload Generated Documentation to Correct Path"

vsperf: Run colorado verify/merge jobs on intel-pod3

Change-Id: Ic893544d76e9e99189c4bba1370e5d5c0bec2e92
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Refactor SSHUtils

- Add utility functions to get and put remote files
- Add JumpHostHopClient class that creates an ssh connection to a remote
  server through a jumphost. This class inherits from paramiko SSHClient
  and provides all the methods SSHClient provides
- Add get_ssh_connection utility function that creates an ssh client
  object.

Change-Id: Ic5e56f53781a861e991ae02864eb2e06dacaee1f
Signed-off-by: George Paraskevopoulos <geopar@intracom-telecom.com>

Upload Generated Documentation to Correct Path

Documentation for Colorado 2.0 is not being uploaded to the correct
place. Instead of being uploaded to 'colorado/2.0/docs' documentation is
getting uploaded to 'colorado/2.0/'. Using `$gs_path` over `$GS_URL`
should fix this.

Further this should fix the failure from the gsutil command happening
when trying to set the correct Content-Type header on HTML files as it's
referencing a path that does not exist.

JIRA: DOCS-161

Change-Id: Ic732fda5cac54b1cc4834f2b44000ee87838f269
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Update opnfv-docs Merge Job Trigger and Parameter"

Apex: removes opendaylight-sfc rpm from upload

We no longer build a separate RPM for opendaylight-sfc, so this needs to
be removed.

Change-Id: I6dc10d4dbc1c42336f299e4b05955e95a67bb1a0
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Add documentation for deploying on baremetal"

Merge "prototypes: bifrost: Ignore dnsmasq service failures"

Merge "reslove issue about can not trigger verify jobs"

Merge "Set arm-pod-3 as non-ci POD"

prototypes: bifrost: Ignore dnsmasq service failures

If this is the first time we run bifrost on a host or if we haven't
run bifrost since the last reboot, restarting the dnsmasq service will
fail because of conflicts with the dnsmasq process running by libvirt.
This is later on 'fixed' by bifrost by killing the one from libvirt.
Make sure that this spurious failure will not prevent the rest of the
cleanup process to move on.

Change-Id: Iebf37881570c27cb07cea3cecdb0fa8ac3fc511b
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update opnfv-docs Merge Job Trigger and Parameter

- Adds 'GERRIT_REFSPEC' parameter
   By setting a default to 'refs/heads/{branch}' (which will evaluate to
   either 'refs/heads/master', or 'refs/heads/stable/colorado') we will
   be able to manually trigger patchsets.

- Adds 'rebuild docs' comment to trigger
   Because 'remerge' is used by multiple projects, adding 'rebuild docs'
   will allow anyone to trigger only a rebuilding of the documentation,
   while still rebuilding them on a 'remerge' comment.

Change-Id: I596f3e8bf412077e5e505555cb0654394a32d213
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "vswitchperf: Update merge and verify jobs"

Merge "Disable selinux for RHEL"

Trigger test unit execution on verify + Published for jenkins

Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>
Change-Id: Ieb8e291d31479fff1c7cad941eb9be83cd4b670f
Depends-On: Icd958552fafb4e8dc58f9008586bcaf33862ccd4
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "bug fix: pdf generation"

Merge "Set a Custom URL for Bifrost Verification Jobs"

Set a Custom URL for Bifrost Verification Jobs

OpenStack-CI documentation states[1] a custom URL needs to be set in
order for Jenkins comments to be correctly formatted by the OpenStack
Gerrit server.

[1] http://docs.openstack.org/infra/system-config/third_party.html#the-jenkins-gerrit-trigger-plugin-way

Change-Id: Id10c9839b823f0b3841cfcaa16a6dd384d34cbbe
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "make elastic index configurable rather than settled in code"

bug fix: pdf generation

Change-Id: Ic101411a991b4baac8e1683bc5cad924f85f05c2
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Set arm-pod-3 as non-ci POD

arm-pod-3 will be removed as CI pod and this commit add triggers
to make it a non-ci pod

Change-Id: Ice16b8d32c553a059a2c9885fd801a736a59a14d
Signed-off-by: cristinapauna <cristina.pauna@enea.com>

Add documentation for deploying on baremetal

Change-Id: I9685b733ae2e3e732c78e78381778c944eace90c
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

rename result_collection_api to testapi

Change-Id: Iec4e3db23cd44f30831e17c127eda74e9d9b5d14
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

make elastic index configurable rather than settled in code

JIRA: FUNCTEST-519

Change-Id: I4c97c01492ed47b589b0e8981dcfb431ca0838ae
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "project-ize kibana_dashboard"

Merge "fix files with MIT or BSD licenses in testapi"

vswitchperf: Update merge and verify jobs

Update and verify jobs will execute real vsperf TCs,
which won't require a traffic generator. Script
./build-vsperf.sh will take care about creation, update
and activation of python virtual environment. Jobs will
be executed at ubuntu nodes, where python3 is available,
so call of scl is required only for daily job. Update
is backward compatible, i.e. merge and verify jobs
will pass with old version of ./build-vsperf.sh.

JIRA: VSPERF-391

Change-Id: I6cb0e9a1c1bcf315dd0e484f845123ec41c849fc
Signed-off-by: Martin Klozik <martinx.klozik@intel.com>
Reviewed-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

reslove issue about can not trigger verify jobs

Change-Id: Ie47eca93aaa05b2c04770c6f84f848fe6c709630
Signed-off-by: Jing Sun <sun.jing22@zte.com.cn>

fix files with MIT or BSD licenses in testapi

moving tornado_swagger/static/ dir under  3rd_party/ dir

JIRA: RELENG-156

Change-Id: I8c15f6776a7626d5837982d5961106a120f0c7a5
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

project-ize kibana_dashboard

JIRA: FUNCTEST-513

Change-Id: Id25dbea72b5945bc40f30c0a4b3ffe3898c3ab0b
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

[compass] verify both trusty and centos7

JIRA: COMPASS-494

Change-Id: I05ca3ad22bfb926245ac89a8ef81f832a9b31959
Signed-off-by: QiLiang <liangqi1@huawei.com>

Merge "Armband: Move lab-config to OPNFV securedlab"

Merge "Add sfc scenarios on ARM"

Disable selinux for RHEL

It is causing some unexpected permission errors if
that is enabled.

Change-Id: I96c3131a55a1b7c83a655738938645f537ab48f6
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Armband: cleanup: retire arm-build1

JIRA: ARMBAND-137

Change-Id: Idbbd25449f127867f0eed03144a0e68dfbf91e12
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Add sfc scenarios on ARM

Added old l2 sfc scenarios for both ha and noha on master branch
JIRA: ARMBAND-144

Change-Id: Ie28f9f9b32abe82b9f596d5b7d6336e2df425eb4
Signed-off-by: cristinapauna <cristina.pauna@enea.com>

Armband: Move lab-config to OPNFV securedlab

This depends on:
- jenkins-enea ssh access to OPNFV gerrit;
- master and stable/colorado securedlab definitions for arm-pod* [1];

[1] https://gerrit.opnfv.org/gerrit/#/c/23159/

JIRA: ARMBAND-149

Change-Id: Ic9a2e232027636694ffd441fe5203cb06975f137
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Fix macs in inventory

Change-Id: I834155dbd3451b06c2b45299bc64f76992b8e1b2
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>y

Add console password to images

It is useful to have a user/pass to login from console.

Change-Id: I10ca00e80c07f3506710dc3133baf8012f7856ae
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Fix network interface on vm

When spinning on a vm, interface is normally eth1, not eno1.

Change-Id: I2be7a252b06f155908d207817a1c5302bd40677e
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Merge "dovetail tool: unittest added"

Merge "Update JJB Sandbox"

Add apex CI PODs

JIRA: DOVETAIL-32

Change-Id: I00a7a133331da086542c46dc78f7f36d43ff2cf2
Signed-off-by: zshi <zshi@redhat.com>

dovetail tool: unittest added

JIRA: DOVETAIL-14

this should be merged after https://gerrit.opnfv.org/gerrit/#/c/23135/

Change-Id: I9bb341c4c4de454ba9246c435e169d948205d2ba
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Merge "Add apex installer support for dovetail CI"

bifrost: Vote on upstream patches

Bifrost core wants OPNFV CI to vote on upstream bifrost patches to
increase the visibility.

Change-Id: Ia4fbdf5fa551750b6063dfb8610b6699039c4fbe
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

Add apex installer support for dovetail CI

JIRA: DOVETAIL-32

This commit is part of the effort to test dovetail CI
for apex installer, see gerrit review 23065 for the
other part.

Change-Id: I645cc3fc854d27a651b1903936fb66dfe55c28d4
Signed-off-by: zshi <zshi@redhat.com>

Merge "Installer adapters"

implement build.sh of daisy4nfv

Change-Id: Iea673c27d17e10e53f0d6b7ef04ccb9742d51739
Signed-off-by: Jing Sun <sun.jing22@zte.com.cn>

Merge "rename elasticsearch index of kibana_dashboard"

fuel, armband: build, deploy: export TERM="vt220"

Since we do not actually parse our build/deploy logs for color chars,
set the terminal to "vt220".

This will silence quite a few of colorization special identifiers,
but NOT all of them (e.g. `tput sgr0` still prints a sequence).

For Fuel@OPNFV build process, we also need to workaround docker
terminal settings not being passed down when using a tty (see [1]),
which will be fixed in Docker 1.13+. This fix is handled in [2].

[1] https://github.com/docker/docker/issues/9299
[2] https://gerrit.opnfv.org/gerrit/#/c/22883/

Change-Id: I5f0c6eae33349ef81b67dd17e6df4e0af6274fab
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Merge "Add d3 graph presentation to yardstick reporting"

Merge "Tune sudo settings on server"

Add d3 graph presentation to yardstick reporting

JIRA: YARDSTICK-367

Change-Id: Ifa2cca1bdfc7d94a84758019d0b1693e09b46e47
Signed-off-by: chenjiankum <chenjiankun1@huawei.com>

rename elasticsearch index of kibana_dashboard

JIRA: FUNCTEST-508

Change-Id: I3c12d76438fd55922ece62aa5ab98cbf03a7facd
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "visualize qpi using kibana_dashboard"

Merge "always config conf.js in kibana_dashboard"

visualize qpi using kibana_dashboard

JIRA: QTIP-122

Change-Id: Ice29c0a841e911b23959c91322331c5a66281be5
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Tune sudo settings on server

We need to have passwordless sudo, and not require
a tty.

Change-Id: Iee11cade89a45b49d6b623f07d8ccb76f9e5882d
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Merge "Add export functions to reporting"

always config conf.js in kibana_dashboard

JIRA: FUNCTEST-507

Change-Id: Iad6000ccc94285bd8be03939eb2e83d7f254a887
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Merge "refactor dashboard_construct"

Merge "dovetail: add dovetail tool into daily job"

Merge "fuel: Proposal for specifying scenario name in commit message"

Fix the jenkins jobs

Some of the jobs were programmed at the same time
This fix sets the jobs 8 hours apart

Change-Id: I13463b8a00df67519e2e2b8e333b4c625f1e9d8b
Signed-off-by: cristinapauna <cristina.pauna@enea.com>

fuel: Proposal for specifying scenario name in commit message

Please take a look at fuel-basic-exp.sh for the proposal.

Apart from scenario name input proposal, jobs and script templatest have
been created as well.

Change-Id: I53b74b2e1ed34acb1f54b7ab21823227fff86d10
Signed-off-by: Fatih Degirmenci <fatih.degirmenci@ericsson.com>

refactor dashboard_construct

JIRA: FUNCTEST-506

Change-Id: Ib80e35140ce4f759749a932ca3b8b49572378d79
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Add export functions to reporting

JIRA: FUNCTEST-486

Change-Id: I84ad52f12097bbc5976c754d28ebc76d49b1eff2
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "[compass] put huawei-pod2 into CI resource pool"

Merge "separate visualization building from dashboard building"

separate visualization building from dashboard building

JIRA: RELENG-155

Change-Id: I19355898d5dc5ef73fcfe4ebaf4604c4bf1e8f10
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Installer adapters

This tool might be used by any project in OPNFV
to retrieve information about the deployed
OpenStack nodes.
It is python based and using paramiko.

It can:
  - get info about deployment
  - get the info about the nodes (ip, mac, ...)
  - stablish ssh connection even with ProxyCommand option
  - run remote commands
  - scp to/from nodes (i.e. fetch credentials from controller)

Added FuelAdapter as an example.

JIRA: RELENG-149
JIRA: RELENG-150

Change-Id: I49d8be96d754e0950e337aa2f88172341446fdd4
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

refactor _verify_document

JIRA: FUNCTEST-505

Change-Id: I284c3e09b295c083300fa8a557bdb8178ded1521
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

[compass] put huawei-pod2 into CI resource pool

Change-Id: I8b8cf515d47e6117bfa5804c15fac22ac8b8d90a
Signed-off-by: meimei <meimei@huawei.com>

dovetail: add dovetail tool into daily job

JIRA: DOVETAIL-14

Change-Id: Ie9a8f8f34b5e4a89d3013d0fc9100a39267a1aed
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Add script to properly install puppet

This will be needed specially on jumphost,
when deploying puppet from scratch.

Change-Id: Ife7d3fff98826ee53edb74585b7cbfc7cad2e0a8
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Add management of /root/.ssh key

It is generally needed to have this file created,
for next manifests to run properly.

Change-Id: I3ca1dd05a44ecdd6bee9abcfd6ba7fa875022ed4
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>

Merge "Add new hiera with default for baremetal"

Merge "fuel: Specify upstream/opnfv branches separately and use include scripts"

Add new hiera with default for baremetal

Refactor the common.yaml with the settings only for
vms, and create a new common_baremetal file that will
contain all settings needed for baremetal deploys,
with sane defaults.

Change-Id: I5ae3ed6d870086544792cb41f166246a3a153251
Signed-Off-By: Yolanda Robla <yroblamo@redhat.com>