Update git submodules

* Update docs/submodules/sdnvpn from branch 'master'
  - create log file during logger initialization

    Currently the log messages from utils and openstack_utils
    python modules are not logged into bgpvpn.log. This is
    because this file is created during SDNVPN Feature
    initialization. So creating this file during logger
    initialization itself.

    Change-Id: I538acdfb2119f1eaa562f61dac3b6bf7c3a58e41
Signed-off-by: Periyasamy Palanisamy <periyasamy.palanisamy@ericsson.com>

Add OVN4NFV release notes

Change-Id: Ib6886c51f5916a8a98a5ac728c136472883281da
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Make volumes appear as SCSI devices in aarch64"
  - Make volumes appear as SCSI devices in aarch64

    Adding volumes in openstack by default uses virtio_blk and the
    devices appear as /dev/vdX. In aarch64 however a qemu pci slot
    is already in use so the tests cannot assign more than one volume
    to a VM. Forcing the drives to use virtio-scsi solves the issue
    and allows more volumes to be attached as /dev/sdX. The variable
    defining the drive is VOLUME_DEVICE_NAME and is passed as
    environmental variable when the container is created.

    JIRA: ARMBAND-376

    Change-Id: Ia688cff338ff319e22a3b26796fa197297c23ce0
Signed-off-by: Charalampos Kominos <Charalampos.Kominos@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Disable vnf runs for aarch64"
  - Disable vnf runs for aarch64

    Functest VNF tests are not adapted for aarch64.
    The tests can be reactivated when they are adapted to execute
    on aarch64.
    JIRA: FUNCTEST-964

    Change-Id: I2413a6eff831c8dd2751b7bc73ad583f55a00dcf
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

Update git submodules

* Update docs/submodules/calipso from branch 'master'
  - test year

    Change-Id: I22981fb6c6f755234a7c34ec74763f0975f533c3
Signed-off-by: KorenLev <korenlev@gmail.com>

Update git submodules

* Update docs/submodules/moon from branch 'master'
  - Merge "Update documentation to show which parameter is mandatory or not."
  - Update documentation to show which parameter is mandatory or not.

    Change-Id: I903c0ec1329ca29fb9dd88644d067d6b6f6bd147

Update git submodules

* Update docs/submodules/moon from branch 'master'
  - Add unique names test cases

    Change-Id: I3f314ec3b3e88839c77a93ea016c10c0a31d10b1

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Adding a tox environment for locally building docs

    Run tox -edocs to locally build the Dovetail docs. This is quite
    useful because the default OPNFV docs preview build toolchain is
    broken for Dovetail.

    Change-Id: I0a55a701b96437a20aa09edc47bc3e49e32c0b87
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Decoupling Bottlenecks Docker config items from source code

    There are some special Docker setting items when creating
    Bottlenecks Docker Cntainers.
    Move the special settings to config files.
    Disable the function to push results to DB.

    JIRA: DOVETAIL-645

    Change-Id: Icc033222edf74c0fe4853dede2794f4226fd4252
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/stor4nfv from branch 'master'
  - userguide

    Change-Id: Id22c6199f5a6d821d652f79cf07de3d899823352
Signed-off-by: Qiaowei Ren <qiaowei.ren@intel.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Simplify vping_ssh

    It directly calls ping from the ssh socket.
    It fixes a possible missing security rule.

    It stops blocking if vpings are in failure.

    Change-Id: I64092a155bb134fa8b7d31d0d13f695e019540d1
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Remove local DB

    Remove local DB and can just report without launch local DB.

    Need to do a little modification with the web portal code.

    JIRA: DOVETAIL-593

    Change-Id: I595db39cce4156596ee0522d4b7e642a23d78ab9
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Functest fail to parse refstack results"
  - Functest fail to parse refstack results

    1. The regular expression can't work well for refstack results
    2. Refer to http://testresults.opnfv.org/test/api/v1/results?project=functest&case_name=refstack_defcore&last=1
    3. There are 88 success test cases but the list of success is empty
    4. Refstack test case name is not always begin with {0}, it maybe any number
    5. The test case whose name has the keyword 'fail' will also be list in 'failures'

    Change-Id: I5187aaaabdca762256be9162cc85ba42263169bc
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Switch to Shade in rally

    Use Shade for managing OpenStack resources in rally.

    Change-Id: Ic8b7aaef6886f6ca4930b2ea463317b75ed8d3c9
Signed-off-by: Juha Kosonen <juha.kosonen@nokia.com>
  - Implement get_external_network via shade

    It fixes the current issues as EXTERNAL_NETWORK is mainly unset by
    all Installers [1].

    [1] https://build.opnfv.org/ci/view/functest/job/functest-fuel-armband-baremetal-arm-daily-fraser/31/console

    Change-Id: I8ee62623701c15b9ff962d0a0e07a77934ff03ac
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Disable Snaps Fraser Verify Job"
  - Disable Snaps Fraser Verify Job

    As master is currently disabled, it doesn't make sense for this to be
    enabled.

    Change-Id: Ie5966e22ffdff7a585781673259775c4e6150acf
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[yardstick] debug dump image ID"
  - [yardstick] debug dump image ID

    we need to know if we are pulling stale yardstick/stable images

    for example, if when branching between releases we can
    still be pulling old release yardstick/stable images without
    knowing it.

    This will dump the IMAGE ID of the images we just pulled which
    we can match to Jenkins docker push builds

    Change-Id: I875cf2fd07d17c3eebe294e70f2edccd9f48ce11
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "fuel, armband: basic healthcheck in verify jobs"
  - fuel, armband: basic healthcheck in verify jobs

    Enable Functest based gating for jobs:
    - fuel-verify-*
    - armband-verify-*
    This includes Functest suite 'healthcheck' and testcase 'vping_ssh',
    similar to Compass4NFV verify jobs.

    While at it, remove 'basic' phase from verify jobs, as linting is
    handled via separate jobs on Jenkins master and there's no other
    reason to keep it around.

    JIRA: FUEL-340

    Change-Id: I11dce6998d7ac16e68cf2b9d72a1ed6b23ca2483
Signed-off-by: ting wu <ting.wu@enea.com>
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Add "os_cloud_config" as a new context flag parameter"
  - Add "os_cloud_config" as a new context flag parameter

    This new parameter will contain the OpenStack cloud specific configuration
    used by Shade client. This new flag is used only in Heat context.

    By default, this new parameter (dict) will contain this content:
      'os_cloud_config': {'verify': False}

    This field will be used by HeatStack [1] to create a Shade cloud. Shade
    retrieves, if not defined, the OpenStack configuration from
    "os_client_config". This configuration is used to generate the cloud
    configuration, which is the description of the OpenStackCloud returned.

    The default parameter defined, "verify", refers to the related bug. By
    default, in case of using SSL certificate it will not be verified.

    [1] https://github.com/opnfv/yardstick/blob/b338d3091bb0beb89d4ad9f7c144f43a31a19a74/yardstick/orchestrator/heat.py#L47

    JIRA: YARDSTICK-1139

    Change-Id: I875a7018401b84e51dab775b8194174645d27e06
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Update the dummy-scenario-heat-context testcase"
  - Update the dummy-scenario-heat-context testcase

    The testcase is included in the docs to demonstrate definining a heat context.
    It previously used cirros, but this is not included by default.
    Set-up instructions/scripts add yardstick-image and yardstick-flavor, so these
    have been added to the testcase instead.

    A default value for context_name was also added.

    Change-Id: I5f642086971487b334ae48a5cf5c9b71e9b99e2e
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Update git submodules

* Update docs/submodules/fuel from branch 'master'
  - [odl] Remove unused connecter/port from proxy

    Change-Id: I7a880c0a011d6f5f4a7e2d8c8309871b1c290235
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge changes from topics 'YARDSTICK-1147', 'YARDSTICK-1144'

    * changes:
      Fix ansible scripts for running in container
      Correctly set PYTHONPATH in Dockerfile

  - Fix ansible scripts for running in container

    JIRA: YARDSTICK-1147

    Change-Id: I52dae85a2d97192bc8a48c5aeea3173b3d4de003
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>
  - Correctly set PYTHONPATH in Dockerfile

    JIRA: YARDSTICK-1144

    Change-Id: I8c0fe229ed620417a85356e017b171260373c43f
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - MQ startup process refactor

    YARDSTICK-1112

    Change-Id: Id30236e190bae9fb0f5b5ebd4c5e04798e4fd443
Signed-off-by: Chornyi, TarasX <tarasx.chornyi@intel.com>

Update git submodules

* Update docs/submodules/stor4nfv from branch 'master'
  - update k8-nosdn-stor4nfv-ha scenario documentation

    Change-Id: Iea38168d2819cbbedcfcc799dfd93840aaf53d4a
Signed-off-by: Qiaowei Ren <qiaowei.ren@intel.com>

Update git submodules

* Update docs/submodules/releng-xci from branch 'master'
  - xci: Remove intermediate scenarios tasks file

    Now that the scenario role is recorded as a local fact, we can
    include the role directly directly so we don't need the the
    intermediate file anymore.

    deploy-scenario:os-nosdn-nofeature
    installer-type:osa

    Change-Id: Ia3c5658826f115538b2a103d987ee8f33d3048b9
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng-xci from branch 'master'
  - xci: Improve scenario bootstrapping process

    It's best to check whether the scenario/distro/flavor combination is
    supported before spending time cloning all the scenarios. Moreover,
    we can record the scenario information as a local fact so we can use
    it during the deployment later on.

    Change-Id: I1971444c6c6302a844f44ea651ad3b83c4da435c
Signed-off-by: Markos Chandras <mchandras@suse.de>
  - xci: playbooks: Simplify scenario overrides mechanism

    Now that releng-xci does not have any internal scenarios anymore, we can
    simplify the way we plug scenarios to XCI. We keep cloning scenarios in
    the cache directory but we also allow users to pass a special
    'xci_scenarios_overrides' variable similar to the
    'opnfv_scenario_requirements.yml' file to allow them to override
    specific keys of the dictionaries. This can be used by Jenkins to test
    incoming changes by altering the defaults values. For example, when
    we want to test a Gerrit change we can create a file called foobar.yml
    with the following contents

    xci_scenarios_overrides:
      - scenario: os-odl-sfc
          version: 9fa5400012e02408b416eb7bd26307e7d179abce
          refspec: refs/changes/79/55879/7

    and load it using

    XCI_ANSIBLE_PARAMS="-e @foobar.yml"

    This will make XCI checkout the refspec that we want instead of the
    default version.

    Change-Id: Ida49910b4c79b843582ddd70c00063fe9bc90dd4
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Remove unused methods in SampleVNF"
  - Remove unused methods in SampleVNF

    The following private methods are unused in
    yardstick/network_services/vnf_generic/vnf/sample_vnf.py:SampleVNF

    * _build_ports(self)
    * _get_route_data(self, route_index, route_type)
    * _get_port0localip6(self)
    * _get_port1localip6(self)
    * _get_port0prefixlen6(self)
    * _get_port1prefixlen6(self)
    * _get_port0gateway6(self)
    * _get_port1gateway6(self)

    They are being removed as:
    * _get_port* functions are already implemented and used in MultiPortConfig
    * _get_route_data is an auxillary functions used by the previous ones
    * _build_ports is implemented in the helpers

    JIRA: YARDSTICK-1122
    Change-Id: Ie7a706cd87b610ea56f89214118a02e612a70dc0
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Replace nova get flavor with shade client.

    Rename get_flavor_by_name with get_flavor.
    Function get_flavor now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: Ic82127e475baf39643be0a254b177f3058b85748
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Replace nova get server with shade client.

    Rename get_server_by_name with get_server.
    Function get_server now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: I69c59145cefdb565f3ece27baaaf932905e1b757
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>

Update git submodules

* Update docs/submodules/bottlenecks from branch 'master'
  - Restructure monitoring scripts

    Restructure the monitoring scripts and modify the scripts to remove the
    redundance

    Change-Id: Ib4a5d7bea2dc455ec03ad61780b6caf06831daa8
Signed-off-by: Yang Yu <Gabriel.yuyang@huawei.com>

Update git submodules

* Update docs/submodules/stor4nfv from branch 'master'
  - k8-nosdn-stor4nfv-ha Scenario Documentation

    Documentation for the k8nosdn-stor4nfv-ha scenario.

    Change-Id: I80b3814cff636deec41331c6e4bbdec63a5ce7ae
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>
    (cherry picked from commit 91625f4898dcdcba64f1941c6c56f13938c9d4ea)

Update git submodules

* Update docs/submodules/bottlenecks from branch 'master'
  - Style-check for monitoring scripts

    Fix the style-check errors for monitoring scripts.
    In another patch, the scripts will be restructured
    according the dicretory structure.

    Change-Id: I4149b18177fa1bdeb1b12a84ecad3d7d0b78260b
Signed-off-by: Yang Yu <Gabriel.yuyang@huawei.com>

Update git submodules

* Update docs/submodules/bottlenecks from branch 'master'
  - Some informations are redundant

    This patch is to remove the redundant results in Soak throughputs
    reports to TestDB

    Change-Id: Ib7e95df8353f3aa7b28187d352d5a6a213af2727
Signed-off-by: Yang Yu <Gabriel.yuyang@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Integrating Functest Patrole test case

    Adding the new Patrole test case of Functest to Dovetail and to the
    proposed_tests test suite.

    JIRA: DOVETAIL-649

    Change-Id: I2c3f583cdbd3af75cec020b0fe97f287d23498a5
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix resources/images directory usage with deploy

    Change-Id: If50ad310049edca687da8e0acf412a7e1eacd2b6
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: disable iso verify for master branch

    Change-Id: I46753983e1fb37300df70700c474c3dda3532ffa
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Fix nsb_setup.sh script"
  - Fix nsb_setup.sh script

    Ansible role install_dependencies was renamed
    to install_dependencies_jumphost in previous patch.

    JIRA: YARDSTICK-1146

    Change-Id: Idf7c191151961c1c0e63ad2f75aa0aab8ed2b2fa
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Move tests: unit/network_services/{lib/,collector/,*.py}"
  - Move tests: unit/network_services/{lib/,collector/,*.py}

    * Fix pylint errors
    * Add TODOs

    Some errors are ignored locally, as they were a symptom of other problems.
    These issues have been flagged with a TODO, and should be fixed later.

    JIRA: YARDSTICK-837
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    Change-Id: Idc2e70291b6d9b4cf7e7249a10c4a290b999206c

Update git submodules

* Update docs/submodules/releng-xci from branch 'master'
  - xci: roles: bootstrap-host: Simplify configuration files

    We split the networking task on distro specific files to make it
    easier to read. Moreover, the debian network configuration has been
    improved by simply sharing a common file across all nodes and also
    use the 'source' facility in the main /etc/network/interfaces file
    to use one configuration file per interface.

    Change-Id: Ic822fe6dc197227e70c0ba7cee812629df287d82
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Update for master upstream deployments

    Change-Id: I92635178ddc354dd7773cd372a34d46f5ee0bf2a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/sfc from branch 'master'
  - Fix version in setup.cfg

    Selecting another tag than the official ones (opnfv-xxx) breaks all
    Functest builds because pbr requirements are unmet [1].

    [1] https://build.opnfv.org/ci/job/functest-features-docker-build-amd64-master/219/console

    Change-Id: I8a6a603c9f4e976c8bcdcce865850b46f6e69453
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Rewrite TempestResourcesManager

    It now leverages on OpenStack Shade to allow gating OpenStack master
    as asked by TSC. Switching to OpenStack master (OpenStack SDK Rocky)
    requires to change only one line.

    It stops dedicating the network to the user possibly created because
    the support is incomplete (the users have to be registed in
    tempest.conf and the multiprocessing has to be enforced).

    It also writes the second image and the second flavor in tempest.conf.

    Change-Id: I9fe2c90a6073ebc240e9aa8fdf2ef93d5dd5f15f
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>
  - Rewrite vping_ssh and vping_userdata

    They now leverage on shade to allow gating OpenStack master as asked
    by TSC. Switching to OpenStack master (openstacksdk) requires to
    change only one line.

    It deletes the related unit tests as they have to be fully rewritten.
    They will be added in another change.

    Change-Id: I0c60681d6e1c0944960770429ef972947dd85321
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>
  - Set image_url as filename

    It will be reused as soon as vping switches to openstacksdk.

    Change-Id: Ib84f4b35b22ead1741579ec9140d3626f9102469
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Replace nova attach volume to server with shade client."
  - Replace nova attach volume to server with shade client.

    Function attach_volume_to_server now uses shade client
    instead of nova client.

    JIRA: YARDSTICK-1088

    Change-Id: Id00df672c2c195b5c338cbbc30ddf2742a4e4d29
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>

Update git submodules

* Update docs/submodules/moon from branch 'master'
  - Fix a bug in functional tests execution.

    Change-Id: Idc31639c649d3e739ee320fa3edd022daca4fa6f

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Add Bottlenecks Fraser Docker Push Job

    Change-Id: I4d6c4015ca36f743dadbb6524a1ca8d5619ce3d6
Signed-off-by: Yang Yu <Gabriel.yuyang@huawei.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Fix NoneType in create_router.py

    It lets Neutron handle str or unicode instead of returning None.
    It reverts the first proposal [1] which raises side effects [2].

    [1] https://gerrit.opnfv.org/gerrit/#/c/56171/
    [2] https://build.opnfv.org/ci/view/functest/job/functest-compass-baremetal-daily-master/126/console

    Change-Id: I1b45c7d6118321dd67343f31253f154abae73655
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Merge "Copy Updates For Brandon"

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Add release notes in releases/fraser/functest.yaml

    Change-Id: I0384563e5e663ea485626562df5ee49815b95817
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Update Dockerfile.aarch64.patch

    The patch doesn't apply anymore for the latest docker builds.
    Updated the patch to accomodate the latest changes to the Dockerfile

    Change-Id: Ia8a35337a421b3628c90be3060f049c655446758
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Update git submodules

* Update docs/submodules/sdnvpn from branch 'master'
  - Fix os-odl-bgpvpn-[no]ha scenario reference

    These shouldn't be prefixed with a '-' nor duplicated.

    Change-Id: I88f5b2d18436a258d6ac573a1fbc6dee735b48da
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Copy Updates For Brandon

Change-Id: Ie8547189d06afb7a104b3fa39a2be363b92d620b
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update the OPNFV Platform Overview Diagram

The file is renamed to match the release and updated with the new
diagram.

Change-Id: I1c06648b07512ada7df374c25f6c8cb95e41c8e5
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/pharos from branch 'master'
  - Merge "Okinawa Open Labratory(OOL) POD1 PDF/IDF"
  - Okinawa Open Labratory(OOL) POD1 PDF/IDF

    Change-Id: I0980de9c2ff37654dbfd2d58002b9e61226cf749
Signed-off-by: Hideyasu Hayashi <hideyasu.hayashi@okinawaopenlabs.org>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Extend web portal to show if API exemption was used during a test run

    JIRA: DOVETAIL-634

    The OVP web port needs to read from the test results if the strict API
    response validation exemption was used or not and show it
    correspondingly.

    Detailed description:

        As discussed on the Dovetail call on 2018-04-11, the web portal should
    show if API response validation was enabled or disabled. The information
    if API response validation was enabled or disabled is to be determined
    based on the dovetail.log file. If API response validation was
    disabled,** the log file contains the line "Strict API response
    validation DISABLED.". Upon uploading a result tar-package, the web
    portal should extract this information from the log file, store it in
    the database, and display it as follows:

        This indication shall be displayed along with the test summary on the
    Test Run Results page as either:

        "API response validation enabled"   or
        "API response validation disabled"

        For clarification: API response validation is enabled by default. API
    response validation is disabled only if  the --no-api-validation command
    line option is given.

    Change-Id: Ifacb1eb2127cc8dc6364c98dead1217aeedfd359
Signed-off-by: chenjiankun <chenjiankun1@huawei.com>

Update git submodules

* Update docs/submodules/releng-xci from branch 'master'
  - xci: Add XCI OSA variables file

    We can use an XCI specific YAML file to add OSA options which are common
    across flavors. Right now, it only overrides the default openSUSE mirror
    to use a more stable one.

    Change-Id: Iae7d542787ead33be1e64cdeda60761aa401cfde
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Add active wait function"
  - Add active wait function

    Added function "wait_until_true". This function will make an active
    wait until the predicate passed as an argument returns True.

    If the timeout expires, the function will raise a generic exception
    or a user defined one passed as an argument.

    This function will be used in YARDSTICK-1127.

    JIRA: YARDSTICK-1128

    Change-Id: I9854e465ac6b586bf4be39ab4b266d5625b39e30
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Tag SDNVPN for Fraser 6.0"
  - Tag SDNVPN for Fraser 6.0

    This is tagged at the current tip of stable/fraser branch

    Change-Id: Ie169aa7e2ef7096155253aeb5c8adeeefc2cf278
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Tag Stor4NFV for Fraser 6.0"
  - Tag Stor4NFV for Fraser 6.0

    Include link to release notes

    Change-Id: Ic9b8ed9d08fd54f00bf4afe9539f32fae9339e23
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Update Clover tags Clover for Fraser 6.0.1"
  - Update Clover tags Clover for Fraser 6.0.1

    Add the opnfv-6.0.1 to the current commit, and lists opnfv-6.0.0 as
    being tagged on the previous one.

    Change-Id: I01b3efb6fe04b3dcf32ef2c01315ecb34fb30133
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Tag OPNFVDocs for Fraser 6.0

    This is tagged at the last merged docs patch to stable/fraser

    Change-Id: I0d976cd947621ceab3a15df8ea98bdc245fe93fc
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Fraser 6.0.0 tag"
  - Fraser 6.0.0 tag

    I have tagged your repo for you at the head of the
    fraser branch

    Please let us know if this is correct.
    If I dont hear back from you I will merge this and tag your repo
    at this location

    Change-Id: I9223da8139ce997e6b7dde9db30a875324c0b94f
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Fraser 6.0.0 tag"
  - Fraser 6.0.0 tag

    I have tagged your repo for you at the head of the fraser branch

    Please let us know if this is correct.
    If I dont hear back from you I will merge this and tag your repo
    at this location

    Change-Id: Ie9ee3b17d5f909b0160cbacd7db99a43385c3d7d
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Fraser 6.0.0 tag"
  - Fraser 6.0.0 tag

    I have tagged your repo for you at the head of the fraser branch

    Please let us know if this is correct.
    If I dont hear back from you I will merge this and tag your repo
    at this location

    Change-Id: I66541b703924018ca7d81a736a1af8767c100846
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Tag Apex for Fraser 6.0

    The last commit I had to revert, as the refs were put under branches
    branch should never change and indicates where the branching happens.

    I have taken those refs and put them in the releases section

    Change-Id: I8026b331b18cde18c08ed1bef79d291c3a7ffce8
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Revert "Apex: update sha commit hashes for Fraser""
  - Revert "Apex: update sha commit hashes for Fraser"

    This reverts commit 583c715b4c5320bdd6e0b09b68af852d8660dc14.

    Change-Id: I63c99606804c4c02b1e8aff91937c62916137bc9

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Dovetail CI jobs failed sometimes when Archive artifacts

    According to this https://issues.jenkins-ci.org/browse/JENKINS-47566,
    the failure seems to be caused by the permission problem.
    Change the owner of all files in 'results' directory to be jenkins.

    Change-Id: I0ed30018354259601c39016fc1950ea7db867e78
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: update sha commit hashes for Fraser

    Change-Id: Ic3cb135911eddc4490a50e57f5165688cec623a0
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Update Clover 6.0.0 release SHA1

    Change-Id: I28c584535617afb32801f912adafe5282aa64ed1
Signed-off-by: Stephen Wong <stephen.kf.wong@gmail.com>

Update git submodules

* Update docs/submodules/clover from branch 'master'
  - Update docs with edits and proper release tag

    - Incorporated feedback from doc reviews
    - Fix some rendering issues
    - Add redis inspect section
    - Update SDC deploy instructions using Fraser release tag

    Change-Id: I573dcd04066ad83b9c659fae645c65ab4aaa2007
Signed-off-by: Eddie Arrage <eddie.arrage@huawei.com>

Merge "Updating Fraser Scenario listing"

Merge "Add link to Armband release notes"

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Update Parser Fraser 6.0.1 Release Tag"
  - Update Parser Fraser 6.0.1 Release Tag

    opnfv-6.0.0 was previously tagged on the master branch, but the ref to
    be release is on stable/fraser. So bumping the tag to 6.0.1 and adding
    the previous tag at the correct ref to the file.

    Change-Id: Ic57fd2116e8662391748455cfe25c23e9853b65d
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Functest 6.0.0 release SHA1

    Change-Id: Ieaa5b8050da3f502074d7f968c4cf65a108f84c2
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[VSPERF] Added releases tag and release-notes URL"
  - [VSPERF] Added releases tag and release-notes URL

    Updated the following in vswitchperf.yaml
    1. Added releases: opnfv-6.0.0
    2. updated the SHA1 for stable/fraser
    3. Added release-notes

    Moved URL to new line to overcome the line-length limit
    Patch-set3: Restored the git tag of stable/fraser to the original

    Change-Id: Ie41f874a92869c5e9225881cd8501b4d4ba7c5c4
Signed-off-by: Sridhar K. N. Rao <sridhar.rao@spirent.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Add Samplevnf project release tag and notes"
  - Add Samplevnf project release tag and notes

    Change-Id: I83347286490344912593a122fc47013d5fcf7225
Signed-off-by: Deepak S <deepak.s@linux.intel.com>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[Fraser] ovn4nfv git tagging."
  - [Fraser] ovn4nfv git tagging.

    Change-Id: I34c7009f377529cd8eab5583115afa7019dcf510
Signed-off-by: Trinath Somanchi <trinath.somanchi@nxp.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Update Release Notes and SHA"
  - Update Release Notes and SHA

    Change-Id: Ib7a0e785e18c035debbc90e54c4b5d9810b1ffe8
Signed-off-by: Manuel Buil <mbuil@suse.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[QTIP] Add release tag and release-notes"
  - [QTIP] Add release tag and release-notes

    Change-Id: I2ec85de7d0970915519b9178f5d5bf6e9d007cbe
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "For tagging Compass4nfv 6.0.0"
  - For tagging Compass4nfv 6.0.0

    JIRA:-

    Change-Id: Ieffad56c6710edf0efaaea5e49609623cbcfa32b
Signed-off-by: chigang <chigang@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[yardstick] fraser opnfv-6.0.0 release tag"
  - [yardstick] fraser opnfv-6.0.0 release tag

    Change-Id: Ifef00c7dd02b0bcdede3229c847708e366d964de
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "add release notes for container4nfv"
  - add release notes for container4nfv

    Change-Id: Ided8302e6d80e330bb3b469b2fead23be876c5bc
Signed-off-by: Guo Ruijing <ruijing.guo@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Added release notes for StorPerf"
  - Added release notes for StorPerf

    Change-Id: I50890fe884666be5a7920e2a8e379052ca434f21
Signed-off-by: mbeierl <mark.beierl@dell.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "For tagging snaps 6.0.0"
  - For tagging snaps 6.0.0

    Change-Id: Iccf5d92b8d82d9e1bec981bbfdb986ae02b3a75b
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Link Release Notes for armband and fuel"
  - Link Release Notes for armband and fuel

    Change-Id: I89fd7c62064bf2a1796bfe722658902a32bbda02
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[daisy] Tagging for Fraser release"
  - [daisy] Tagging for Fraser release

    Change-Id: I99f305500a82a498ffd41a151edcce436cacdf66
Signed-off-by: Zhijiang Hu <hu.zhijiang@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[release] Fuel, Armband: Release opnfv-6.0.0"
  - [release] Fuel, Armband: Release opnfv-6.0.0

    Change-Id: I533c172f691a33d0e8250df0328d66de594453ae
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Tagging Doctor opnfv-6.0.0"
  - Tagging Doctor opnfv-6.0.0

    Change-Id: I98ab05e4dca1a30cecee9670d35f0ffb18147853
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "updated auto.yaml with 6.0.0 tagging and release-notes URL"
  - updated auto.yaml with 6.0.0 tagging and release-notes URL

    patch 2:
    fixed leading space issue

    patch 3:
    cherry-picked commits that were merged in master since initial
    stable/fraser branch; applied to Auto stable/fraser; submitted;
    used resulting new stable/fraser SHA1 as the SHA1 for
    Auto release 6.0.0 (3a957...); didn't change original
    stable/fraser SHA1 as Auto branch stable/fraser (5c811...);
    branches: https://gerrit.opnfv.org/gerrit/#/admin/projects/auto,branches
    changes: https://gerrit.opnfv.org/gerrit/#/q/project:auto

    Change-Id: I39c6acaeacc749b17489553e2af52e06902d2828
Signed-off-by: Gerard Damm <gerard.damm@wipro.com>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Clover project release note link update for OPNFV Fraser release"
  - Clover project release note link update for OPNFV Fraser release

    Change-Id: Iaad6338d203a3c58cb91474bbd6d4909b322543a
Signed-off-by: Stephen Wong <stephen.kf.wong@gmail.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Update tagging, hash and release notes url for fraser (NFVbench)"
  - Update tagging, hash and release notes url for fraser (NFVbench)

    Change-Id: I0b77a45bbd3a97fde29b02824b427bcbf974122c
Signed-off-by: ahothan <ahothan@cisco.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Tagging IPv6 stable/fraser branch for Fraser Release"
  - Tagging IPv6 stable/fraser branch for Fraser Release

    Change-Id: Id1805f1837c9e73b82f0d44b6ff082c48685a613
Signed-off-by: Bin Hu <bh526r@att.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[SDNVPN] Add release notes link"
  - [SDNVPN] Add release notes link

    Change-Id: I75b22755fdcf2c85a55d2e7ec7e0b93916ab38df
Signed-off-by: Periyasamy Palanisamy <periyasamy.palanisamy@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "added support for joid release."
  - added support for joid release.

    Change-Id: Ifc5ac941ba1f1e3467e6d538236093e285f6894e
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Tagging Clover 6.0.0"
  - Tagging Clover 6.0.0

    JIRA: -

    Change-Id: I93fff9f1b24dcd8a91958a974e957b99d7cb7af9
Signed-off-by: QiLiang <liangqi1@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[yardstick] link to fraser release notes"
  - [yardstick] link to fraser release notes

    Change-Id: I323e7ff2904e95571823f35386960cd9ce39c036
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[parser] Add release notes for parser"
  - [parser] Add release notes for parser

    Change-Id: I78a3f372418d4058f5da18d71e1b7c439647af95
Signed-off-by: shangxdy <shang.xiaodong@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[compass4nfv] add release notes link to release file"
  - [compass4nfv] add release notes link to release file

    Change-Id: I442aae1f8d7e81581c231d31bcf4fb7190d7bc0c
Signed-off-by: wutianwei <wutianwei1@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Add Bottlenecks project release tag and notes"
  - Add Bottlenecks project release tag and notes

    Change-Id: I1dc616a46cb4b6e24996c9e7a3f253c23363b5fe
Signed-off-by: Yang Yu <Gabriel.yuyang@huawei.com>

Update git submodules

* Update docs/submodules/armband from branch 'master'
  - u/fuel: Bump for sysinfo print

    Change-Id: I578c9709f1efbbd06807085c9fc355fc8c6b5525
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Update git submodules

* Update docs/submodules/ovn4nfv from branch 'master'
  - Type Error correction in release notes.

    Change-Id: I8611ce78b8d68cdfd6ee0fa941c831f0d729ff19
Signed-off-by: Trinath Somanchi <trinath.somanchi@nxp.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - dynamically using the bootstrap and change domain.

    Change-Id: Id5fbb9cc577cd69b216d2ae2a7e8669412dbba0d
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>