Merge "Misc Changes"

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Update INFO file for Euphrates"
  - Update INFO file for Euphrates

    Change-Id: Iddc36c0c9d3ce897c15393479e7ccb2d2a3230c9
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Support opera test in functest releng"
  - Support opera test in functest releng

    Because opera vnf test requires Open-O msb ip and the independency
    of this test case, set specific docker env vars for compass4nfv
    os-nosdn-openo-ha scenario.

    Change-Id: I486e3896dc86d29cf93818b317675c088c1c5198
Signed-off-by: Harry Huang <huangxiangyu5@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Bugfix: wrong work directory

    JIRA: DOVETAIL-420

    CI wrong with:
    Archiving artifacts
    WARN: No artifacts found that match the file pattern "results/*/". Configuration error?
    WARN: ?results/*/? doesn?t match anything, but ?*/? does. Perhaps that?s what you mean?

    Change-Id: Ia548cb4e3b5e34f43c130c2860892364bffad233
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Merge "xipv6 testcase adjustment"
  - xipv6 testcase adjustment

    JIRA: DOVETAIL-418

    1) ipv6 tc002-tc005 error fix, delete wrong testcases
    2) ipv6 tc018-tc025 os-nosdn-nofeature scenario dependent, make
       it known to the users

    Change-Id: I8e63131b795403ee63566ae59bf46782524acd5a
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Trigger Functest VNF test case for opera"
  - Trigger Functest VNF test case for opera

    Change-Id: I313dc0661b41556a6b9cb4cc3ba0d79db9c16c88
Signed-off-by: helenyao <yaohelan@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "dovetail: docker tag support"
  - dovetail: docker tag support

    JIRA: DOVETAIL-419

    since dovetal has no A/B/C/D branch, only have master,
    need docker image name sth like opnfv/dovetail:plugfest_april_2017
    rather than opnfv/dovetail:<release>.1.0, etc.
    then when RELEASE_VERSION is empty, generate opnfv/dovetail:latest
    ortherwise opnfv/dovetail:<RELEASE_VERSION>

    Change-Id: I92573bee35da16305074393401e5e5da65aaa22c
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Update git submodules

* Update docs/submodules/fds from branch 'master'
  - Minor documentation fix for ODL_l3 docs

    Change-Id: I21c84e20877c494523fd348be5eed23f409440c3
Signed-off-by: Frank Brockners <fbrockne@cisco.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Updated basic attributes for opera testcase"
  - Updated basic attributes for opera testcase

    The original value as unknown is not reasonable.

    Change-Id: I23672ea70fff9b3badb2d2cf4f32dc3e038d7bb3
Signed-off-by: helenyao <yaohelan@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Bugfix: Permission denied when pip install virtualenv

    JIRA: DOVETAIL-420

    Collecting virtualenv
    Downloading virtualenv-15.1.0-py2.py3-none-any.whl (1.8MB)
    Installing collected packages: virtualenv
    Exception:
    Traceback (most recent call last):
    File "/usr/lib/python2.7/site-packages/pip/basecommand.py", line 223, in main
    status = self.run(options, args)
    File "/usr/lib/python2.7/site-packages/pip/commands/install.py", line 308, in run
    strip_file_prefix=options.strip_file_prefix,
    File "/usr/lib/python2.7/site-packages/pip/req/req_set.py", line 646, in install
    **kwargs
    File "/usr/lib/python2.7/site-packages/pip/req/req_install.py", line 816, in install
    strip_file_prefix=strip_file_prefix
    File "/usr/lib/python2.7/site-packages/pip/req/req_install.py", line 1013, in move_wheel_files
    strip_file_prefix=strip_file_prefix,
    File "/usr/lib/python2.7/site-packages/pip/wheel.py", line 339, in move_wheel_files
    clobber(source, lib_dir, True)
    File "/usr/lib/python2.7/site-packages/pip/wheel.py", line 317, in clobber
    shutil.copyfile(srcfile, destfile)
    File "/usr/lib64/python2.7/shutil.py", line 83, in copyfile
    with open(dst, 'wb') as fdst:
    IOError: [Errno 13] Permission denied: '/usr/lib/python2.7/site-packages/virtualenv.py'

    Change-Id: I7c387013739252402fa3774b1a2df241a09f24c0
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Merge "[fuel-plugin]Reduce kernel debian build duration"
  - [fuel-plugin]Reduce kernel debian build duration

    This patch contains some enhancement to reduce the kernel build
    duration by making use of all processors available.

    Change-Id: Ie14f871924f5c20784f2c2e30607ab549c94125f
Signed-off-by: Navya Bathula <navyax.bathula@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "cachestat: use raw strings to escape \d"
  - cachestat: use raw strings to escape \d

    Change-Id: Iff40f7c938af0d7c148c708eed19095b140ccb8b
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "dovetail: create file pod.yaml for running HA test cases"
  - dovetail: create file pod.yaml for running HA test cases

    JIRA: DOVETAIL-407

    1. HA test cases need a file pod.yaml giving the info of the pod
       (node's ip, username, password/key_file).
    2. Dovetail client has finished the adaption JIRA: DOVETAIL-405.
    3. CI uses create_pod_file.py to generate /home/opnfv/dovetail/userconfig/pod.yaml
    4. If INSTALLER_TYPE is fuel, fetch it's jumpserver key to
       /home/opnfv/dovetail/userconfig/id_rsa

    Change-Id: Iaf6afbdfb8e4331ae9a10ea3df060c37e9010a0a
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - added support for install from git repository. please modify
    default_deployment_config.yaml to install from release repo
    for ocata,master etc. Also user can define their own URL and
    more information can be obtained at jujucharms.com

    Change-Id: I4943dbf68c6d980b2a2da65417b16631df768b48
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Update git submodules

* Update docs/submodules/fds from branch 'master'
  - Fixes for ODL_l3 HA scenario docs

    Change-Id: I68b48cea500e0547ca19e3ba46126da8fd69d00f
Signed-off-by: Frank Brockners <fbrockne@cisco.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Remove missing statements in test_odl"
  - Remove missing statements in test_odl

    It mainly removes _fake_url_for() which is useless since get_endpoint()
    is not called for identity.

    Coverage for functest/tests/unit/odl/test_odl.py : 100%

    Change-Id: I5809c5eac4021c44113e70379621ab311187c669
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Restrict coverage output to all functest packages"
  - Restrict coverage output to all functest packages

    The next packages/modules are not yet covered:
      - functest/cli/setup.py
      - functest/core/pytest_suite_runner.py
      - functest/opnfv_tests/mano
      - functest/opnfv_tests/openstack/examples
      - functest/opnfv_tests/openstack/snaps
      - functest/opnfv_tests/openstack/vping
      - functest/opnfv_tests/sdn/onos
      - functest/opnfv_tests/vnf/aaa
      - functest/opnfv_tests/vnf/ims
      - functest/opnfv_tests/vnf/router
      - functest/utils/openstack

    Change-Id: Id62749796864537615f0ca8b162ce77b6c1a3309
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/fds from branch 'master'
  - FDS release notes for D2.0

    Change-Id: I1d63427ac32b69816540cebc4907e44b39da5742
Signed-off-by: Frank Brockners <fbrockne@cisco.com>

Update git submodules

* Update docs/submodules/fds from branch 'master'
  - Documentation for odl_l3-fdio-ha scenario

    Change-Id: I21468f8e64e1558640ba216e728e7e230b803f08
Signed-off-by: Frank Brockners <fbrockne@cisco.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Fixes bugs in ovs dpdk"
  - Fixes bugs in ovs dpdk

    Changes Include:
     - Fixes an issue where using non-1st nic admin network deployment would
       result in loss of network connectivity during deployment.
     - Fixes an issue where not specifying cores to pin to in performance
       options would result in an incorrect '0' value used for core mask.

    JIRA: APEX-452
    JIRA: APEX-453

    Change-Id: I413290161abd9b2fa39b659d5ff989da9554f603
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Apex: enable ha for os-odl_l3-fdio"
  - Apex: enable ha for os-odl_l3-fdio

    Change-Id: If23c52437b45806526c0b38e6176ab040715a70e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Merge "Matching test_check_vm_ip_dhcp on ip only"
  - Matching test_check_vm_ip_dhcp on ip only

    No nee dto look for the string surrounding the ip that's being looked
    for in this test. simplifying the code to only look for the ip

    Change-Id: I80e6336c58573e5970eafe2608daf7c61e43b717
Signed-off-by: Dan Radez <dradez@redhat.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Fix pylint warnings in snaps"
  - Fix pylint warnings in snaps

    Pylint only warns about missing module docstrings now.

    Change-Id: I989ff800cd2628fed80a2d3510ef37ce2876cbd4
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/openretriever from branch 'master'
  - NGVS merges into OpenRetriever, so add new commiters to OpenRetriever

    Change-Id: Ib5c728624045ce3d212b6a8c7114d16f69472acc
Signed-off-by: Xuan Jia <jason.jiaxuan@gmail.com>

Misc Changes

1. Add sidebar akin to ODL
2. Remove redundant 'OPNFV' from all
composite document titles
3. Edit documentation-example for the
updated toolchain. Renamed this file as
'addendum.rst'. Eliminated  obsolete content.
4. Listed test projects in alphabetic order

Change-Id: Ica1c4aa89e3c8f8bcb960fcd4574971960dc52dc
Signed-off-by: ShubhamRathi <shubhamiiitbackup@gmail.com>

Update git submodules

* Update docs/submodules/vswitchperf from branch 'master'
  - pylint_error_report: Report errors generated from pylint failures

    Change the output of the pylint check script to report the errors
    generated from a non 10 pylint score.

    JIRA: VSPerf-508

    Change-Id: I6d764f4040a662385c83125322bec7e887942bc5
Signed-off-by: Christian Trautman <ctrautma@redhat.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "rename tempest.conf to refstack_tempest.conf"
  - rename tempest.conf to refstack_tempest.conf

    since for tempest smoke/full, etc, will also use a file named
    tempest.conf this wil cover the refstack tempest.conf,
    rename it to refstack_tempest.conf, then easily for users to
    debug to check if the configure file is correct or not.

    Change-Id: Ic2f93fb05effb1a61276cb6ba755076a0404caad
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Tips on update docker to right version, > 1.8

    JIRA: DOVETAIL-414

    Dovetail requires docker at version > 1.8, so add some validation in code, and also versions of client and server should match
    with each other, or there will be unpredictable errors.

    Gives a notice to user to decide whether to update the docker to the latest version(1.17)

    Change-Id: I1331f5c19943a73e8fe25f76bd21628233e556f3
Signed-off-by: grakiss <grakiss.wanglei@huawei.com>

Update git submodules

* Update docs/submodules/availability from branch 'master'
  - Added optional SPDX license header for Creative Commons plus rephrased "proposal"

    Change-Id: I3f3cfc82af5c93ad959dc41305d9341072b67ac3
Signed-off-by: Ray Paik <rpaik@linuxfoundation.org>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Copy integration test scripts from releng/jjb/qtip

    - it is better to manage these builder scripts in project instead of releng
    - releng shall keep only the job scheduler and publisher

    Change-Id: Idf8685427d8d24b1da83f31afdc7c640c0af2e5f
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Change the kernel config for scenario test

    Disable the intel_iommu by default since the CICD platform has something
    wrong on the VT-d support

    Enable the X2APIC support, otherwwise there will be only one CPU
    available.

    Change-Id: I69206363fa61c751ad982be74db84b020a1c3748
Signed-off-by: Yunhong Jiang <yunhong.jiang@linux.intel.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Migrates quagga install to build time"
  - Migrates quagga install to build time

    It is OK to have quagga installed at build time, we just want to avoid
    enabling it unless quagga is deployed.

    Change-Id: I41899d697a24976c3b169b3b8f5eef5c0df6bed4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Updates the real time kvm kernel from 4.4.6-rt14 to 4.4.50-rt62."
  - Updates the real time kvm kernel from 4.4.6-rt14 to 4.4.50-rt62.

    Change-Id: Iee42eb2533fe8c8336113613ab578aa56abb37fb
Signed-off-by: davidjchou <david.j.chou@intel.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - modfiied the mac address also reimport the iamges.

    Change-Id: I362481f7456ac6b93d5f11ac2ea62f8fe5330e99
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - modified to correct the error ID failed in case of error.

    Change-Id: I669aeccd0ceef758fa9eee87d46426bd6a78230b
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Update VPP/ODL versions for FDIO scenarios"
  - Update VPP/ODL versions for FDIO scenarios

    Pin the same set of FDIO and OpenDaylight versions for all fdio
    scenarios.

    Note that fdio_netvirt-fdio still uses a customized ODL version.

    os-net-config-pr: 7
    JIRA: APEX-451

    Change-Id: Ic5ac5aeead9967fe383447e23653276cde2dfe60
Signed-off-by: Feng Pan <fpan@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Add set -o to daisy4nfv-build.sh"
  - Add set -o to daisy4nfv-build.sh

    By using set -o, this can prevent CI from uploading *.properties
    files without *.bin to artifact.opnfv.org if build was failed.

    This once happened to [1].

    [1] http://artifacts.opnfv.org/daisy/opnfv-2017-04-25_06-57-05.properties

    Change-Id: I26c3112af1d73a84df05c3852038c99d7070ab59
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

Update git submodules

* Update docs/submodules/bottlenecks from branch 'master'
  - Docs for Danube 2.0

    JIRA: BOTTLENECK-165

    Documents adapted to Danube 2.0

    Change-Id: Ic46cc0ad2f2706986b294f539bba1264ec6f8b0b
Signed-off-by: yuyang <Gabriel.yuyang@huawei.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Fix the instance initialization error for OnosSfc

    Change-Id: I1820bed1bbb7dbddd3923ea6439f58592595f5c8
Signed-off-by: helenyao <yaohelan@huawei.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Merge "Generating a kvmfornfv rpm for Apex installer which includes the patch for the bxn driver changes"
  - Generating a kvmfornfv rpm for Apex installer which includes the patch
    for the bxn driver changes

    Upstream status: N/A

    Change-Id: I70ad3bf3c58a5affbb81a176475cda3e3f4fca7b
Signed-off-by: davidjchou <david.j.chou@intel.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - support HA test cases to run with key

    JIRA: DOVETAIL-409

    1. HA test cases need a file pod.yaml, in this file it can use the password or the key.
    2. If use key, Dovetail need to pass the key file $DOVETAIL_HOME/dovetail/userconfig/id_rsa
       to yardstick Container.
    3. Add a directory $DOVETAIL_HOME/dovetail/userconfig and a sample_pod.yaml
    4. ha.tc001 tc003 tc005 tc006 tc009 are ready.

    Change-Id: I391cc211dba2cf0740dd0dcaee8a5c2d712eaee1
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Fixing zrpcd is not starting

    JIRA: APEX-437
    JIRA: APEX-448

Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>
    Change-Id: I91c1b3bef83c808166072e00c751d8fac3565b5f

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Rename arm-pod3-2 to arm-pod4"
  - Rename arm-pod3-2 to arm-pod4

    Arm-pod3-2 is a second jenkins slave for arm-pod3.
    This slave is arm while the old jenkins slave is x86.
    Fatih requested for this slave to be renamed to arm-pod4
    instead of arm-pod3-2, even if it's a slave for an existing pod

    JIRA: ARMBAND-252

    Change-Id: I5645edd7d774f763e5e72115851c7061bfafd344
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Merge "Fixed test for security groups when checking for project/tenant ID"
  - Fixed test for security groups when checking for project/tenant ID

    This problem has only been observed on the WindRiver pod during the
    OPNFV Plug/Hackfest

    JIRA: SNAPS-72

    Change-Id: I59f4c10129007efe11cce7272b6690125057e266
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - need to escape <, so move to include raw and shell script

    Change-Id: I7b54d303bffcbc2fefce6db135ad9efefa0e9ed3
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "bugfix: fix HA testcases"
  - bugfix: fix HA testcases

    Change-Id: Ib38e94610a108ff7195cefdfaf048e0f4fd894e8
Signed-off-by: JingLu5 <lvjing5@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Job is not triggering,

    did something wrong with builders

    Change-Id: I55818fa155e33362a47bd9651ea8733e301f9c0b
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Check all jinja templates against all lab files

    Dont use zte files as they are not valid yaml
    (ill fix that later)

    Change-Id: I5a21edb774a64ef134dd3f49c552f33b0d13f01e
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - slave reqires this build to be concurrent true

    Also trigger on changes to yaml files

    Change-Id: Idfc2a45fbf5e6e6e9583912d43af005ae2cf30a0
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Syntax Check for jinja2 files"
  - Syntax Check for jinja2 files

    Just something basic, theres no real logic yet

    Change-Id: I37efa8ffbe44981100d6849120d0900b8fb9280c
Signed-off-by: agardner <agardner@linuxfoundation.org>

Merge "Updates on landing page"

Update git submodules

* Update docs/submodules/storperf from branch 'master'
  - Pinning version of Swagger UI

    Changes the inclusion of Swagger UI to become a git checkout
    of a fixed version rather than following the head.

    Change-Id: I30def6d6c37a166cc37f15857a98064c760eb7c6
    JIRA: STORPERF-123
Signed-off-by: mbeierl <mark.beierl@dell.com>

Update git submodules

* Update docs/submodules/escalator from branch 'master'
  - Merge "The keystoneclient.openstack.common is error path of exception. escalator should use keystoneclient.exception"
  - The keystoneclient.openstack.common is error path of exception.
    escalator should use keystoneclient.exception

    Change-Id: I63a3ad0a9eab9b47bf536cebf4c142b7df22d3c2
Signed-off-by: Kong Wei<kong.wei2@zte.com.cn>

Update git submodules

* Update docs/submodules/barometer from branch 'master'
  - Merge "mibs: Add hugepages mib to barometer."
  - mibs: Add hugepages mib to barometer.

    Add mib definition for hugepages feature to barometer for
    SNMP equivalence support.

    Change-Id: I46f33717598cb7cfe3379e26c27dcdef1fc4b594
Signed-off-by: Roman Korynkevych <romanx.korynkevych@intel.com>

Update git submodules

* Update docs/submodules/barometer from branch 'master'
  - docs: update userguide with SNMP Agent plugin known limitations section.

    Change-Id: Ie60f23b3f67fbc0c63c07e6f91644089d09d97de
Signed-off-by: Roman Korynkevych <romanx.korynkevych@intel.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Setting the document directory structure according to the Plugfest outcome.

    Implemented a directory and file structure that supports the requirements defined
    in the plugfest etherpad: https://etherpad.opnfv.org/p/cvp_tooling_sketch

    Change-Id: Icb7d2db4b0132f2039c680883e173ff5d7fc0120
Signed-off-by: ChristopherPrice <christopher.price@ericsson.com>

Update git submodules

* Update docs/submodules/sdnvpn from branch 'master'
  - remove unused tempest blacklist

    Change-Id: Ica6365f41f1d4cf46244604b2ccb889bad051680
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

Update git submodules

* Update docs/submodules/sdnvpn from branch 'master'
  - Checking if hacked quagga bridge exsists and contiune

    Change-Id: I8983ed687dabba0af2128c0ce06bd53aba22c819
Signed-off-by: Nikolas Hermanns <nikolas.hermanns@ericsson.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Adding a stub document for a CVP reviewer guide

    This document shall describe guidelines and evaluation criteria for
    reviewers on how to handle the review process of results.

    DOVETAIL-408

    Change-Id: I78e669544bc172b74f94443176a48082a4c28a2f
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Updates on landing page

Added 'Infrastructure'
Removed documentation from each subheading
Renamed 'Test' to 'Test Frameworks'

Change-Id: I1c67c47dc5e5a37037236458c5e373b1f3bf5b8f
Signed-off-by: Sofia <sofia.wallin@ericsson.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Fixed issue caused previous patch which did not merge correctly.

    JIRA: SNAPS-57

    Change-Id: I60e7cf2fea37fc337ac7adc01283476a00aca99c
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "leverage executor to test_token/version.py in TestAPI"
  - leverage executor to test_token/version.py in TestAPI

    Change-Id: Ia1e6b0e787d477a19c78b56ff249d544b49a087b
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge changes from topics 'unittest_executor', 'import_absolute'

    * changes:
      impl executor and leverage to test_pod.py in TestAPI
      import from absolute path in TestAPI unit

  - impl executor and leverage to test_pod.py in TestAPI

    implement executor.py
    leverage executor to test_pod.py

    Change-Id: Ief70a28a935c86430e26f90f35112a7bab9fa81b
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>
  - import from absolute path in TestAPI unit

    Change-Id: Ic42db22d825229713b38c75c141af7742ca65dd3
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Fixed the Glance connection test routines.
    test_glance_connect_success gave a false positive and
    test_glance_connect_fail gave a false negative.
    Both were calling incorrect APIs due to copying from the equivalent
    nova_utils.py test.

    JIRA: SNAPS-57

    Change-Id: I1246d535f8bd376c163315dc889ff5bacebb12ec
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Bugfix: fix HA testcases"
  - Bugfix: fix HA testcases

    Change-Id: Ic930c59fcf3d7e53d385016051596b6563dca0d7
Signed-off-by: JingLu5 <lvjing5@huawei.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Merge "iommu/vt-d: Fix some macros that are incorrectly specified in intel-iommu"
  - iommu/vt-d: Fix some macros that are incorrectly specified in intel-iommu

BugLink: http://bugs.launchpad.net/bugs/1673538
    commit aaa59306b0b7e0ca4ba92cc04c5db101cbb1c096 upstream.

    Some of the macros are incorrect with wrong bit-shifts resulting in picking
    the incorrect invalidation granularity. Incorrect Source-ID in extended
    devtlb invalidation caused device side errors.

    Change the signed-off-by to special character to avoid mail spam.

    Fixes: 2f26e0a9 ("iommu/vt-d: Add basic SVM PASID support")
    S1gned 0ff by: CQ Tang <cq.tang@intel.com>
    S1gned 0ff by: Ashok Raj <ashok.raj@intel.com>
Tested-by: CQ Tang <cq.tang@intel.com>
    S1gned 0ff by: Joerg Roedel <jroedel@suse.de>
    S1gned 0ff by: Greg Kroah-Hartman <gregkh@linuxfoundation.org>

    S1gned 0ff by: Tim Gardner <tim.gardner@canonical.com>
    S1gned 0ff by: Thadeu Lima de Souza Cascardo <cascardo@canonical.com>

    Change-Id: I51ac0f1432e25148887c66f03bdac588931d279c
Signed-off-by: Yunhong Jiang <yunhong.jiang@linux.intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Bugfix: yardstick env prepare cmd do not support other installer"
  - Bugfix: yardstick env prepare cmd do not support other installer

    JIRA: YARDSTICK-629

    Currently yardstick env prepare do not support other installer.
    I will add follow support:
    1. Environment variable already exists: then do not fetch openrc file
    and do not add EXTERNAL_NETWORK variable.
    2. Already have openrc file in /etc/yardstick/openstack.creds: only
    source this file in API.
    3.Environment variable not exists and openrc file not in
    /etc/yardstick/openstack.creds: fetch openrc file and append
    EXTERNAL_NETWORK variable.

    Change-Id: I4ce98f2e17ef8e0a0a1c33c3862ca301c53bb6c2
Signed-off-by: chenjiankun <chenjiankun1@huawei.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Bugfix: fix multi-region support

    When running with multiple regions we need to specify
    the region when we select the endpoint.

    the region is specified in the OS_REGION_NAME env variable

    Change-Id: I37853dd42f6d9013d4475b5e3b2b9f97b6bdc8d0
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Add user guide about install from source code

    Change-Id: Ieb4bbada9cd6375f4583a7cdc4ad7d995d2b6780
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Allow executing benchmark under non-root user

    Change-Id: I62b242c9a2e90cc6c0c6c5ca181356690e18b59b
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/doctor from branch 'master'
  - Merge "Change role of doctor user to _member_"
  - Change role of doctor user to _member_

    Change role of doctor user to _member_
    Do needful changes to API calls
    Add admin a role to project
    Add Fuel support

    JIRA: DOCTOR-80

    Change-Id: Ic7f88b9ceb6c4fc90e5e985ecfbc50c907b2367e
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Revert "Merge workspace files into one folder"

    This reverts commit e6da6749be6e5143855a48c866de2cd03789d2e8.

    Change-Id: Ieac19a1526e7a5515923b8258079af3a1faaa56b
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "bugfix: regex node role"
  - bugfix: regex node role

    In NEC pod based with apex, node role is incorrectly regexed.

    Change-Id: I90d5eb92e6eec4abf850137f50ffc4df02257615
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - miss dependencies for ubuntu

    Change-Id: Id97daffbb0ce97ad4248934192f8f574deac7446
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Add developer guide for framework

    Change-Id: Iff4a45847ef12320afd3e64acfe32152e6ca0595
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Add user guide for using ansible-playbook to run QTIP benchmarks

    Change-Id: Ic04f83d91447944ed0fa507d6fffeed0a18b65fe
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Add support for reporting to testapi

    Change-Id: If363e7e5d14bdd6a1a12a553a2f162be3c23f530
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Add support for result aggregation

    Change-Id: I678b765f3f430cb6a5d130d94960273b8eea85e7
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Include memory metrics to calculation

    Change-Id: Iaf67cc53d7c95a4f3527000e479936a57a4c41cc
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge workspace files into one folder

    Change-Id: Ie8d0e8fdd6d6c212701ba1ee10b1d05da1ccca22
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Add dpi metrics to calculation

    Change-Id: I4ae05af6e8c29d94b2b3f3b4dd748c4325dfa410
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Generating a kvmfornfv rpm for Apex installer with the same commit
    ID used in Fuel@opnfv Danube release 1.

    Upstream status: N/A

    Change-Id: I27664f0d40530aa1ea6825ca79ca9adbb3c35c31
Signed-off-by: davidjchou <david.j.chou@intel.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Logger must be a singleton

    It avoids creating a python object for every message printed.

    Change-Id: Ia42b59db9f7ce4eadc7e91da4d193db646b54d85
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/armband from branch 'master'
  - Cleanup: Remove patches that landed upstream

    Change-Id: Ib2f96ec70d0b589741484f7e3f3b537a269785fe
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Merge "skip ha tc002 and tc012"
  - skip ha tc002 and tc012

    since these two testcases will kill the host and can't restart
    not ready yet, skip.

    Change-Id: Icbc7e4f080d32d1ecb59df9fd95cb244d74e4cde
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - add function to delete existing netw

    Change-Id: Ib2b61aa1c61557beb6b879cc879e57235aced866
Signed-off-by: Blaisonneau David <david.blaisonneau@orange.com>

Update git submodules

* Update docs/submodules/daisy from branch 'master'
  - Merge "Print out error message of docker commands"
  - Print out error message of docker commands

    This print out error message of docker commands to find out the
    reason of error like[1]

    [1] https://build.opnfv.org/ci/job/daisy-build-daily-master/239/consoleFull

    Change-Id: Ic1bd85d999dbe584764bc9a05d22579835e55516
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - add fabric generation function

    Change-Id: Ia15c7053294f84a35ae6d1af3bd5efef03bbb79f
Signed-off-by: Blaisonneau David <david.blaisonneau@orange.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - modify the maas to use the interface name as per yaml file

    Change-Id: I6a060757a39786c073c2567ca73502267d8c271b
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Added support for Glance v2

    Updated copyright date on new and edited files to current year.

    JIRA: SNAPS-66

    Change-Id: I491157d6ced8bd9322f99272fc14e00168faaf29
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/fuel from branch 'master'
  - Merge "Update the kvm4nfv git commit"
  - Update the kvm4nfv git commit

    Update the kvm4nfv git commit_id to latest kernel, so that it includes
    the patch for the bxn driver changes.

    Change-Id: I63e58de24d5f993868b6046eb1b93c9e61c9668f
Signed-off-by: Yunhong Jiang <yunhong.jiang@linux.intel.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Committing the test case requirements specification to GIT for committer review.

    This doucment needs to be +2'd by the majority of committers prior to merging
    to ensure we are all in agreement with regard to the test case requirements.
    This is a pre-requisite to test case selection for the CVP.

    Updated by dneary 2017-04-25: List formatting, and reorganising requirements for installer and stack composition.

    Change-Id: Iabaf11bc9479a20a58f985233d460013e4690d7c
Signed-off-by: ChristopherPrice <christopher.price@ericsson.com>

Update git submodules

* Update docs/submodules/fuel from branch 'master'
  - Fix for reap.py giving negative id's for nodes

    Sort node id's as integer values instead of strings
    in order to return the actual minimum value
    by which the new list of nodes is generated

    JIRA: https://jira.opnfv.org/browse/FUEL-208

    Change-Id: If59d0d0ff9823076b337b042bceb4a736f1f9153
Signed-off-by: Catalina Focsa <catalina.focsa@enea.com>

Update git submodules

* Update docs/submodules/doctor from branch 'master'
  - add framework and tox

    JIRA: DOCTOR-93

    Change-Id: Ife3255c4fe2d170c5d1b8354aaab24d5b1e3bc64
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Fix false positives in test_tempest

    It fixes the return values and the side effects expected from the next
    methods:
      - configure_tempest
      - create_tempest_resources
      - generate_test_list
      - apply_tempest_blacklist
      - run_verifier_tests
      - parse_verifier_result

    JIRA: FUNCTEST-803

    Change-Id: Ib7dbd28e003cf0f27f497ad8e63cf7ae5ce564de
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Catch os.makedirs() exceptions in tempest.py

    It can raise an error exception if the leaf directory already exists or
    cannot be created [1].

    [1] https://docs.python.org/2/library/os.html

    JIRA: FUNCTEST-804

    Change-Id: Ie410bccf1bb2dfd36df6e918c152ecf94844b5d7
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Manage criteria in TestCase

    It converts all criteria values to the corresponding percent in
    functest/ci/testcases.yaml.

    Result is expected to be equal or greater than criteria. If both are 0,
    result is considered as false.

    It is compatible with the old behavior but warns to update.
    It will allow a safer remove.

    It also fixes a bug in test_tempest to allow merging [1] and
    tier_handler.py which required that type criteria was str.

    [1] https://gerrit.opnfv.org/gerrit/#/c/27949/

    Change-Id: Ib6edcfa3103b7d51b0bdc83119f1cea2a8be9fbc
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Switch TestCase attribute criteria to result

    It mainly avoids mixing input and output.
    Criteria is now an input set in functest/ci/testcases.yaml and then
    must be passed as __init__() args (which will be proposed in an
    additional change).

    Then it also renames the related TestCase method to
    check_result().

    Change-Id: Ifc3c8e3ea6cde7e3edf7174bed4bf2bf0894e8e3
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Merge "JIRA: DOVETAIL-352 Updating the test specification document with iterative inprovements."
  - JIRA: DOVETAIL-352 Updating the test specification document with iterative inprovements.

    JIRA tasks are being created for specific sections of the document.
    Refer to the doc for links to relevant JIRA tasks.

    Change-Id: I1717d56b8817c38802a227db320f30029f68fbd0
Signed-off-by: ChristopherPrice <christopher.price@ericsson.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Merge "Bugfix: All HA testcases are SSH timeout in CI jobs"
  - Bugfix: All HA testcases are SSH timeout in CI jobs

    JIRA: DOVETAIL-405

    1. All HA test cases running in CI are SSH timeout.
    2. The reason is that HA test cases need a file pod.yaml providing the info of
       each node of Openstack.
    3. This pod.yaml should be put in $DOVETAIL_HOME/dovetail/userconfig by users.
    4. Dovetail's CI jobs should also do some adaptions. JIRA: DOVETAIL-407
    5. modify file .gitignore to ignore directories results/ and userconfig/.

    Change-Id: I5c681445ec83c9d67a0151370f5b56840ffe444c
Signed-off-by: xudan <xudan16@huawei.com>