Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Replace CONST.* by getattribute/setattr for cli"
  - Replace CONST.* by getattribute/setattr for cli

    Directories affected:
     - functest/cli/commands
    and respective unit test

    JIRA: FUNCTEST-796

    Change-Id: I2ad721819d4b8f97098c589c3b5ed3dcc945409d
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - bugfix: extra fields are added when push results

    extra fields like 'carriers' & 'miss_checks' 'db_key'
    are added when pushing result to TestDB

    Change-Id: Ic8d0751bca14b3b3260df42c0f4f07456c9d5e05
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "Remove "plan" module. Replaced by "project""
  - Remove "plan" module. Replaced by "project"

    Change-Id: I5da2a3cf366e4e5a67b68e34db62219587d923e5
Signed-off-by: Taseer Ahmed <taseer94@gmail.com>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "Add cli-prompts while creating workspace"
  - Add cli-prompts while creating workspace

    Change-Id: I954b2fcf38e89f875f6b52cde63031fc663491dd
Signed-off-by: Taseer Ahmed <taseer94@gmail.com>

Update git submodules

* Update docs/submodules/vswitchperf from branch 'master'
  - vpp_doc_fix: Modify VPP documentation to be current

    Update VPP installation documentation and add note for issue
    seen with some installs.

    Change-Id: Ib1a2bb5f7b6bb07ddff2ea5c7d2ca9f9100250dd
Signed-off-by: Christian Trautman <ctrautma@redhat.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Bumped ansible version to 2.2.2.

    Change-Id: Ibdf633bd475cc295f53e8236b1938a3354cb4f99
Signed-off-by: Maciej Skrocki <maciej.skrocki@intel.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - update the IRC in INFO file for IRC channel error

    JIRA: DOVETAIL-434

    revise the error.change opnfv-testperf to opnfv-meeting

    Change-Id: I70820b202929bbfbdbff2ee104dcbc5601d53357
Signed-off-by: hongbotian <hongbo.tianhongbo@huawei.com>

Update git submodules

* Update docs/submodules/availability from branch 'master'
  - Merge "Removal of Edgar StPierre from Committers List"
  - Removal of Edgar StPierre from Committers List

    Change-Id: I5007f9f8f1ec1edfcd34848c3869fc68fd6a2af2
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Add a new directory to hold pre-downloaded images"
  - Add a new directory to hold pre-downloaded images

    Put all images in the new direcotry. If users want to use the
    local image, map the local directory to the ${HOME}/functest/images

    Change-Id: I0d309b93f52b3da23d6130056f1a19907313ef68
Signed-off-by: helenyao <yaohelan@huawei.com>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "Implement sunburst badge for QPI"
  - Implement sunburst badge for QPI

    Change-Id: Iccdec7b0ac223a38c846f73adc6bd0e53db3723b
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/ves from branch 'master'
  - WIP
    Script and blueprint for demo that uses ONAP VNFs.

    JIRA: VES-11

    Change-Id: I1f5d2c2bb87a1e24f5cc2eb788bfb3f1efed9e46
Signed-off-by: Aimee Ukasick <aimeeu.opensource@gmail.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Add VBMC double check"
  - Add VBMC double check

    Sometimes the VBMC devices don't all start and stay started
    This checks that they are all running before starting a deployment

    Change-Id: I3c69d31549798a5837475d10b8a365bb0e5c9a3d
Signed-off-by: Dan Radez <dradez@redhat.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "dep updates related to removing openstack-tripleo"
  - dep updates related to removing openstack-tripleo

    - configure-vm requires libvirt-python
    - removing some references to openstack-tripleo
    - updating dep urls to artifacts.opnfv.org

    JIRA: APEX-462

    Change-Id: I5ed7f7ad2f2c016fcbc1157b29c2c0e4c5d9b4a7
Signed-off-by: Dan Radez <dradez@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fix daily scm gerrit refspec to null

    Change-Id: I0a8d51c7e0a586469cfe25d0610f078fd937c9ba
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fix daily scm passing and yardstick deploy blocking

    Change-Id: I5b8fd2784cbf78aec17bab89c9cd1cbf82324739
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fix daily scm and functest job blocking with deploy

    Change-Id: I355745e42c510029ffc314fa03eb1a5ca1e3e74a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Use logger instead of printing in console"
  - Use logger instead of printing in console

    It modifies pytest_suite_runner.py to dump unit test results in
    functest.log via logging.

    Change-Id: Ic4e7567c5e52e00ad0e485ccb070029b135041b2
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Build Timeout Wrapper for Yardstick

    Yardstick builds are hanging and not being caught for 19+ hours. Using
    the build timeout plugin we should be able to quickly stop these builds
    and let the project know much sooner there is an issue with their
    builds.

    The default timeout is set to fail if the job takes longer than 30 minutes.
    This can be adjusted later if the time is too long or too short.

    ssh-agent-wrapper is included as it is the default from globals, and
    defaults are superceded by fields added to jobs.

    Change-Id: I9529ab7b6ab8819ceb91694fefbb4ecb3f5cf81c
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/fuel from branch 'master'
  - Adding mpolenchuk@mirantis.com to committers list

    Change-Id: I973810e55ea24ba879fd91ac47388d52d43867e2
Signed-off-by: agardner <agardner@linuxfoundation.org>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Remove check_success_rate"
  - Remove check_success_rate

    After the introduction of is_successful method
    in TestCase class, this is not needed anymore.

    Change-Id: I70f6f9e10495601cd5443467347b97efe27b81a3
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Merge "Optimizing the code and uploading ftrace logs to artifacts"
  - Optimizing the code and uploading ftrace logs to artifacts

    This patch is used to exclude execution of disable_trace.sh as
    ftrace will be disabled during post-execution of cyclictest
    through yardstick. Also includes uploading verify logs to
    artifacts when ftrace is enabled for debugging.

    Change-Id: I4674f2b9c03274eb2a96b3258a718c9f46419022
Signed-off-by: Gundarapu Kalyan Reddy <reddyx.gundarapu@intel.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - To update cyclictest latency threshold values

    This patch is used to update latency threshold values for execution of
    cyclictest test cases through yardstick using kvmfornfv built kernel rpm.

    Revert "Revert "This patch updates latency threshold values""
    This reverts commit 77e6660ea78c5934e4b606a5342c4e0e64be1de6

    Change-Id: I3df6da4dd5bf0e393fdfeea71e8bbe688e794a89
Signed-off-by: Gundarapu Kalyan Reddy <reddyx.gundarapu@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - support showing user's specified contents after signin

    Change-Id: Ia8897860757a2395873ff6972a508c38d7139854
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - add signin web to TestAPI

    Change-Id: I4d39a8561c8ebd3238a495e5799fd43fb1a508b9
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Fix 2 issues related to logger in pytest_suite_runer.py"
  - Fix 2 issues related to logger in pytest_suite_runer.py

    logging.ini requires the full name otherwise all log messages are lost.
    Calling basicConfig() is useless as it has been correctly configured by
    run_tests.py before.

    Change-Id: I03663c01f795b1b844239a9e24379faa529829aa
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Allow running unittest.TestCase via run_tests.py"
  - Allow running unittest.TestCase via run_tests.py

    pytest_suite_runner can run any unittest.TestCase thanks to name passed
    as run arg. Here is the related functest/ci/testcases.yaml:

      run:
          module: 'functest.core.pytest_suite_runner'
          class: 'PyTestSuiteRunner'
          args:
              name: 'functest.tests.unit.odl.test_odl'

    Change-Id: I7c2c611c4afbad1e52bfdca4a3288ccc21491389
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/barometer from branch 'master'
  - ci: update script permissions

    Change-Id: Id6db827036b99603928f4f468d9febb591703ec2
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - bugfix: get_security_group_by_id always return first element

    add check on id before return value
    fixed kwarg into the neutron.list_security_groups to the correct one 'id'
    added unit test to ensure this function always works as designed

    JIRA: SNAPS-82

    Change-Id: I965e1dd54fd1efa8c2d7f6efb87c78ab24cca0e5
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Update git submodules

* Update docs/submodules/pharos from branch 'master'
  - Pharos Dashboard: Add manual resource management

    Dev Pods are now managed by checking the "Dev pod" box in the Admin
    Panel. This commit also fixes a dead image URL and the oauth process for the
    dashboard URL.

    Change-Id: Ic94160eb3a4504a369606261440df0e5354ac027
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Clean test-requirements.txt"
  - Clean test-requirements.txt

    Now only the mandatory requirements related to unit testing are listed
    in test-requirements.txt.

    Change-Id: I2f17a9e18e90d779ddc80b1ace9ac770a76c3385
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Fix the opera ims instance initialization error"
  - Fix the opera ims instance initialization error

    Change-Id: I50f0e1ba91c8c4adcf407d493fb86d9089554cc5
Signed-off-by: helenyao <yaohelan@huawei.com>

Update git submodules

* Update docs/submodules/compass4nfv from branch 'master'
  - FIX compass-core vm panic issue

    JIRA: -

    Update compass-core vm cpu mode in libvirt xml to let
    compass-core vm support most instruction set that host support.

    Change-Id: I654672f441c18e0da87509d3c492ceae2bf9ba95
Signed-off-by: QiLiang <liangqi1@huawei.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - Merge "fix the k8 core bundle and deployment failed."
  - fix the k8 core bundle and deployment failed.

    Change-Id: I65cf597bbc4c68bd80d26ed0d8729127a4e30863
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - Merge "add define for virsh"
  - add define for virsh

    Change-Id: I5035b9162e0e49a710a47564bfb79aaf6f31b57e
Signed-off-by: Guo Ruijing <ruijing.guo@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "add missing dist files ignored by .gitignore"
  - add missing dist files ignored by .gitignore

    Change-Id: Ib29cb5887abb317012d83fb77dcf30e07099a479
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "refactor static_path to accomodate web portal"
  - refactor static_path to accomodate web portal

    move tornado_swagger/static to opnfv_testapi/static
    move swagger related 3rd libs to 3rd_party/swagger

    Change-Id: I32bba10584c99d13687b93f32577e37581db0c63
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "dovetail: conditional steps to run against specific scenarios"
  - dovetail: conditional steps to run against specific scenarios

    JIRA: DOVETAIL-432

    1, the community CI resource is limited, for dovetail CI job,
    there's no need to run against all scenarios, by now,
    nosdn-nofeature-ha odl_l2-bgpvpn-ha odl_l2-nofeature-ha is enough.
    2, jenkins conditional plugin will be used.
       plugin should be installed
       https://wiki.jenkins-ci.org/display/JENKINS/Conditional+BuildStep+Plugin
    3, take compass as an example to see if it works

    Change-Id: Ib23835cbf8801c36e35e088cd0d8bf2d6380e81a
Signed-off-by: MatthewLi <matthew.lijun@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: remove blocking verify jobs per node

    Change-Id: I66e5af8dd11c2797e08c6b370fa1fd717ff57d41
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fixes missing blocking from j2

    Change-Id: I7b79ed22f7dada6edf4ff6853499ceb434fab6bb
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: allow 3 simultaneous builds per node

    Change-Id: Ia0839e1c97ddf8cf9be770d9c791748b9bbefbe0
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Refactors build script for Apex"
  - Refactors build script for Apex

    Changes Include:
     - Build has been refactored into python
     - Caching now packs into multiple unique tar files which are
       logged into a journal file
     - Multiple files and journal allow for multiple apex builds to run
       simultaenously while minimizing risk of collision between cache
       reading and writing
     - Build dependency packages updated and will install when missing
       via ansible
     - If more than 2 caches exist then prune the oldest cache

    Change-Id: Iae703253eb6034aee42bf33153bb6e434d3cec48
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Removing sdn_l3 and _l2 scenario features"
  - Removing sdn_l3 and _l2 scenario features

    JIRA: APEX-429

    Change-Id: Ifb28bb27f8e58ac5b180454719dfb329c3edf000
Signed-off-by: Dan Radez <dradez@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - I would like to nominate Georg Kunz to become a committer in the Dovetail
    project. Georg's nomination is motivated by his commitment to the project
    and his high quality work in helping the Dovetail sdnvpn test suite development,
    test doc patch review and meeting participations.

    I would like to nominate Zenghui to become a committer in the Dovetail
    project. Zenghui's nomination is motivated by his commitment to the
    project and his contributions in dovetail tool and multi-SUT testing.

    I would like to nominate Wanglei to become a committer in the Dovetail
    project. Wanglei's nomination is motivated by his commitment to the project
    and his consistent long time contribution to the Dovetail test framework
    development, test suite patch review and meeting participations.

    I would like to nominate Lincoln to become a committer in the Dovetail
    project. Lincoln's nomination is motivated by his commitment to the project
    and his expertise in multi-vendor testing, compliance testing and test doc
    patch review and meeting participations.

    I would like to nominate Trevor Cooper to become a committer in the Dovetail
    project. Trevor's nomination is motivated by his commitment to the project
    and his experiences in the testing working group, performance testing and
    consistent contributions in reviews and meeting participations.

    I would like to nominate Fuqiao to become a committer in the Dovetail project.
    Fuqiao's nomination is motivated by her commitment to the project and her
    contributions in developing the high availability test area, her experiences
    in bringing service provider requirements and perspective, and her
    contributions in reviews and meeting participations.

    Change-Id: Ia8a4ed3af7219c5376e0dd281ed11a51059c6fd4
Signed-off-by: Wenjing Chu <chu.wenjing@gmail.com>

Update git submodules

* Update docs/submodules/apex from branch 'master'
  - Merge "Adding yamllint to build checks"
  - Adding yamllint to build checks

    - making formatting changes to yaml files to meet yamllint checks

    Change-Id: Id48a8446512943e908e61dc00bbe6c033af27775
Signed-off-by: Dan Radez <dradez@redhat.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Update self.result value to INT

    So far, the test cases are storing a string "PASS" "FAIL"
    in the self.result variable.
    The way the new framework works is with INT Values.

    Change-Id: I45e8693327740faadd8254b21569adfb2cefa6c8
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Conform constants.py with the minimal standards"
  - Conform constants.py with the minimal standards

    It adds the shebang to constants.py and its dependencies and stops
    importing from a relative path. It stops printing obsolete values too.

    It adds python3 support to them by the way.

    Change-Id: Ie7bddcf253eb245844d9e11c17acc69943c1ba63
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Set again run_tests.py's report flag

    It was deleted by the previous change [1]

    [1] https://gerrit.opnfv.org/gerrit/#/c/34137/

    Change-Id: Icfc9b43c30febe21501a9413196cc84f9553ce39
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/joid from branch 'master'
  - fixed syntax error.

    Change-Id: I04d4fa6fbf68bfe3f320f18a4168be9dd73da6cf
Signed-off-by: Narinder Gupta <narinder.gupta@canonical.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Fix an unorderable types error (if python 3)"
  - Fix an unorderable types error (if python 3)

    Change-Id: I07c5a548f10a1779faead4d9c596a1976aff8866
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Add Python3 support to the ODL testcase"
  - Add Python3 support to the ODL testcase

    It also adds this support to its dependencies.

    Change-Id: I0534f0c7b0e15a9ee89f522f314cf5200874454c
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Converted vPing to leverage the object-oriented SNAPS library."
  - Converted vPing to leverage the object-oriented SNAPS library.

    JIRA: FUNCTEST-577

    1. Replaced procedural openstack_utils with the object-oriented SNAPS
       library
    2. Tests now clean themselves up.
    3. Improved code documentation.
    4. Removed dependency on file-based Cirros image and now leveraging the
       download URL.
    5. Removed hardcoded location to the testcases.yaml file to leverage
       the value in config_functest.yaml
    6. Included optional flavor metadata based on the scenario being tested
    7. Included support for multi-part images.
    8. Added enhanced support for configurable images. see SNAPS-76

    Fixed line length verification problem with the previous submission
    Fixed retrieval of external network name to be dynamic.
    Changed external network name retrieval to leverage the newly merged
    snap_util.get_ext_net_name() function
    Added the creation and deletion of flavors.
    SNAPS now has the ability to add/remove security groups from running instances.
    Changed VMInstance constructor by moving userdata to configuration object.

    Change-Id: I0ef5e268eb153d696bb4d9a7533f780e5c603d26
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/sdnvpn from branch 'master'
  - Update logger via logging.getLogger()

    1. The module functest.utils.functest_logger has been deleted and
       logger has been reconfigured in functest [1].
    2. Update all related modules to get loggers via logging.getLogger().

    [1] https://gerrit.opnfv.org/gerrit/#/c/34019/

    JIRA: FUNCTEST-824

    Change-Id: I89f5d15342b5f257fbc2700655e255a4e28bd36f
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Update git submodules

* Update docs/submodules/daisy from branch 'master'
  - add separated disk for ceph in multi-nodes virtual deploy

    Change-Id: Ic3f67bb889c20e95916a1052f0cfa1e238f133a8
Signed-off-by: Alex Yang <yangyang1@zte.com.cn>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Update/Add requirements to run ODL robot CSIT

    It conforms test_odl.py with the new RobotFramework API too.
    It also updates test-requirements.txt as required by the current
    implementation of run_unit_tests.sh.

Co-Authored-By: Cédric Ollivier <cedric.ollivier@orange.com>
    Change-Id: Ibca0150a40d3b8a3f736be1e9dcbf9ce56af0299
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "bugfix: /resources.json and /APIs cannot be accessed"
  - bugfix: /resources.json and /APIs cannot be accessed

    1. change the join way of discover_url
    2. limit tornado version not to use latest 4.5

    Change-Id: I39dfd3b32bf232a7c144087bc9d5f88fb6798ee7
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "delete unuse code in directory /qtip"
  - delete unuse code in directory /qtip

    Change-Id: I6732c7cf572d5b744c3a176ce266b9739e9233fd
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "delete unuse code in directory legacy"
  - delete unuse code in directory legacy

    Change-Id: I31427e8a59ea241e882f41222f211fffe709043f
Signed-off-by: zhihui wu <wu.zhihui1@zte.com.cn>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - fix multi-monitor unitest hang

    need to mock SSH.from_node().execute.return_value
    because we switch most SSH calls to use from_node()
    factory function

    Change-Id: Ibea525c2fcc243d41de8ccbcd40bc98532d69006
Signed-off-by: Ross Brattain <ross.b.brattain@intel.com>

Update git submodules

* Update docs/submodules/netready from branch 'master'
  - Update logger in netready via logging.getLogger()

    1. The module functest.utils.functest_logger has been deleted and
       logger has been reconfigured in functest [1].
    2. Update gluon-test-suite.py to get logger via logging.getLogger().

    [1] https://gerrit.opnfv.org/gerrit/#/c/34019/

    JIRA: FUNCTEST-824

    Change-Id: If7254171bf1146dc7f5a0792705cecf2e84d15c5
Signed-off-by: Linda Wang <wangwulin@huawei.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Merge "Adding breaktrace & disabling timer migration"
  - Adding breaktrace & disabling timer migration

    This patch is used to update yardstick branch and provide
    breaktrace value for executing cyclictest. Also used to
    disable kernel timer migration on guest.

    Change-Id: I44237b6a3711aa22bcabd0aaad199057efa38137
Signed-off-by: Gundarapu Kalyan Reddy <reddyx.gundarapu@intel.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Added support for offline testing

    Expanded the image_metadata used by the tests for overriding default
    images for not only supporting 3part images but also to support offline
    testing as required by Functest.

    JIRA: SNAPS-67

    Change-Id: I6975e7b51fa879fe984af64402939c465df95184
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/kvmfornfv from branch 'master'
  - Generating a kvmfornfv rpm which doesn't includes the debug info
    for Danube release 3 Apex installer

    Upstream status: N/A

    Change-Id: Ia5c36969419cb45d362990ad7cd23e3b4d7c5045
Signed-off-by: davidjchou <david.j.chou@intel.com>

Update git submodules

* Update docs/submodules/snaps from branch 'master'
  - Ensure creators' constructors cannot raise exceptions.

    While creating unit tests for vPing that is using SNAPS, exceptions can
    be raised when retrieving their respective OpenStack clients with
    incorrect credentials. Moved client retrieval to the create() method
    which one should expect exceptions to be raised.

    JIRA: SNAPS-81

    Change-Id: Id8e4279f60b97704b25a89c6312dcf2ebdc3f459
Signed-off-by: spisarski <s.pisarski@cablelabs.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Fix one minor typo"
  - Fix one minor typo

    Change-Id: Id17070985adfbe7817f3be25b47f583cb9ef90b6
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Fully cover the decorator"
  - Fully cover the decorator

    Change-Id: I1f1c938f0715e6afb7edbb8242f9a6c9cbfa65b5
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Assign the wrapped function’s attributes"
  - Assign the wrapped function’s attributes

    It mainly assigns to the wrapper push_results_to_db's __name__,
    __module__ and __doc__ and the documentation string.

    Change-Id: Idc882ac4e743699a4887e46c5066e0983c90afd9
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Additional Unit Tests for core modules"
  - Additional Unit Tests for core modules

    This patch adds unit tests for vnf and pytest_suite_runner.
    It also fixes several pylint warnings/errors.

    Additional tests are required to check args values.

Co-Authored-By: Cédric Ollivier <cedric.ollivier@orange.com>
    Change-Id: I75a829233481655c794402830e1da037ab7cdb8d
Signed-off-by: ashishk1994 <ashishk.iiit@gmail.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Get a logger before printing"
  - Get a logger before printing

    It also fixes pylint errors.

    Change-Id: I0d973360574a517724d0be3986c788c3ce7f54d4
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "jjb: xci: bifrost: Clone git repositories to $WORKSPACE"
  - jjb: xci: bifrost: Clone git repositories to $WORKSPACE

    Commit 0638af211db1 ("jjb: xci: xci-deploy.sh: Run the deployment
    script as normal user") dropped 'sudo' from the bifrost provisioning
    script. However this broke the jobs since the repositories were being
    cloned into /opt where the jenkins user has not access to. As such,
    clone the repositories in the $WORKSPACE directory instead.

    Fixes: 0638af211db1 ("jjb: xci: xci-deploy.sh: Run the deployment script as normal user")
    Change-Id: I55baceaada04496884470997562e3f512f2444a0
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "jjb: xci: xci-deploy.sh: Run the deployment script as normal user"
  - jjb: xci: xci-deploy.sh: Run the deployment script as normal user

    xci-deploy.sh can now be run as normal user so fix the Jenkins job
    accordingly.

    Change-Id: Ifd0d7e4c42c930dbee0bbc30836fadc1a54f2f95
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: Look for SSH keys in $HOME directory"
  - prototypes: xci: Look for SSH keys in $HOME directory

    We no longer run everything as root so we need to look for SSH keys
    in the appropriate home directory.

    Change-Id: Iae1f7eb80059e7d369c8e0c8b6c33c6a4f673f94
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: Move host keys away from / directory"
  - prototypes: xci: Move host keys away from / directory

    Putting the host keys in '/' requires root privileges so
    it's best if we place them in the same directory like the
    rest of the XCI files.

    Change-Id: I030ed3d6cbb57bb984a78aeffb4eca2bd5c10bb0
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: Add ability to use local repositories for testing"
  - prototypes: xci: Add ability to use local repositories for testing

    When developing XCI features it's useful to be able to use the local
    repositories rather than cloning them from git since that makes
    it harder to test local modifications against XCI. As such, we add
    three new variables which can be used to hold local paths to the
    bifrost, releng and openstack-ansible repositories. We are still
    cloning the repositories but we then use the 'synchronize' Ansible
    module to copy modified files from the local repositories.

    Change-Id: I6d593ea48d8b9c51415d9d0848f77a498ef2f486
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: bifrost: Remove OPNFV specific group_vars file"
  - prototypes: bifrost: Remove OPNFV specific group_vars file

    The only reason we had this file was because we had to define our own
    'ssh_public_key_path' variable to look in the /root directory since we
    were running everything as root. Since we are now moving away from this
    approach, this file is not needed anymore.

    Change-Id: Ic938c4c8c877c95ce261721dc32fc5147081e236
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: configure-localhost: Use 'connection: local'"
  - prototypes: xci: configure-localhost: Use 'connection: local'

    Since we are operating on localhost, there is no need to do that via ssh
    so we use 'connection: local' instead. Moreover, we do not need to
    execute everything as root so we drop the remote user directive.

    Change-Id: Ib2127edad29e2da1cd1beebf42cb8f0d278ce3ad
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: provision-vm-nodes: Do not provision VMs as root."
  - prototypes: xci: provision-vm-nodes: Do not provision VMs as root.

    There is no need to provision VM nodes as root. The only thing that we
    need to run as root is the destroy-env.sh script and for that we move
    it to its own play so we can use Ansible's become directive. Moreover,
    since this playbook operates on localhost we can use 'connection: local'
    so we don't have to execute everything via ssh and possibly speed up
    the whole process.

    Change-Id: Ia9efd5f30e95385b5cf193dde352f93551846c0e
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: user-vars: Move root directory away from /opt"
  - prototypes: xci: user-vars: Move root directory away from /opt

    Having everything in the /opt implies root privileges. However, xci
    should work as normal user and as such we use the /tmp directory as
    the root directory.

    Change-Id: I985ded289208e1de53ad0ba878afd5bfd745c3fd
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: xci-deploy: Do not use sudo when connecting to remote hosts"
  - prototypes: xci: xci-deploy: Do not use sudo when connecting to remote hosts

    In preparation for running xci-deploy as normal user, we do not need to
    gain elevated privileges in order to connect to remote hosts. SSH keys
    will be placed in user's ssh directory so we can ssh as normal user.

    Change-Id: Ieb705515ec191955a646839e8f195d089df184bd
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prototypes: xci: Do not require root privileges in xci-deploy"
  - prototypes: xci: Do not require root privileges in xci-deploy

    There is no good reason to run the script as root. If elevated
    privileges are required then we will do it on a per case basis.

    Change-Id: I7195fb3a0026ea20ce04e0b652dd3c1c56ca5741
Signed-off-by: Markos Chandras <mchandras@suse.de>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Add enabled flag in testcases.yaml

    This will allow enable/disable test cases directly
    using true/false.

    Change-Id: Iaa7d051ebb8dd9e5a6f835a823f58f1e17a87b8d
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Switch from generate_report to PrettyTable

    run_tests.py now relies on PrettyTable as most of the openstack clients.
    generate_report.py and its related unit tests are simply removed.

    It sets padding_width=5 in testcase.py too to conform with
    run_tests.py.

    Now report is printed in every case.

    Change-Id: Id9ce93f984503f25d6a2150482f397853fa3dd64
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Update framework pres

    It takes into account the next framework modifications:
      - Switch TestCase attribute criteria to result [1]
      - Manage criteria in TestCase [2]
      - Print the real testcase duration [3]
      - Rename TestCase check_result() to is_successful() [4]

    [1] https://gerrit.opnfv.org/gerrit/#/c/33695/
    [2] https://gerrit.opnfv.org/gerrit/#/c/33697/
    [3] https://gerrit.opnfv.org/gerrit/#/c/34369/
    [4] https://gerrit.opnfv.org/gerrit/#/c/34373/

    Change-Id: I3a6790e4233ef4c55b0535618dacf702f779f28b
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Fix how to get tier_name

    The tier name was incorrect when passing a test case as run_test.py arg.

    Change-Id: I6f439fc7b90facb3f0553798bd1fe06ac9f09475
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: add ramdisk and kernel to upload

    Change-Id: I81e89f9fe313977d6a06c6283cc5301f672a77c3
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/functest from branch 'master'
  - Merge "Modify TestCase.__str__() to use PrettyTable"
  - Modify TestCase.__str__() to use PrettyTable

    It adds PrettyTable as requirement even if it's already defined in
    OpenStack client dependencies.

    If the TestCase object is considered as invalid, it simply returns the
    default str.

    Change-Id: Iee788aef2a13694d9482560977cbbf21c7f2c967
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "refactor config parser to facilitate adding new configs"
  - refactor config parser to facilitate adding new configs

    refactor hardcoded config.py to facilitate adding new
    configurations come along with web portal and Authentication
    features

    Change-Id: Ibc16166ade0d6e730bb4c9d81e9b9bc9b297faa1
Signed-off-by: SerenaFeng <feng.xiaowei@zte.com.cn>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Bugfix: change monitor command in tc019

    JIRA: YARDSTICK-655

    The original openstack command used for monitoring high availability openstack
    nova-api service in tc019 is "nova image-list", the "openstack image list" command
    used in tc019 now may not correctly show the nova-api service status.
    This is patch swtich the monitor command to "openstack server list".

    Change-Id: I8810f28b4328ceb4d911a3041a24774ae9cae8f0
Signed-off-by: JingLu5 <lvjing5@huawei.com>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "Add support for manually installed (not using installer) OPNFV pod"
  - Add support for manually installed (not using installer) OPNFV pod

    Change-Id: I314882dd8a9e491f253f825a8da7ec4c91ed3321
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Merge "Add arithmetic metrics"
  - Add arithmetic metrics

    Change-Id: I99b118931fd78a7908f32ddb418264576468118e
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/vswitchperf from branch 'master'
  - Merge "xena_pairs: Add pairs topology for 2544 testing"
  - xena_pairs: Add pairs topology for 2544 testing

    Add xena pairs topology and port removal options for JSON
    files with RFC2544 testing.  Refactored JSON code for
    better expansion later.

    Resolved pathing issues related to previous patch allowing
    for execution of VSPerf from any directory.

    JIRA: VSPERF-502

    Change-Id: Ida60c1223ae0f45f8879351770ab7fdce859b59b
Signed-off-by: Christian Trautman <ctrautma@redhat.com>

Update git submodules

* Update docs/submodules/bottlenecks from branch 'master'
  - Delete testcase of rubbos and vstf.

    JIRA:BOTTLENECK-167

    This patch will delete vstf and rubbos testcase code.
    Include some testcase config file,
    if there will be someone who want to use this testcase
    maybe B or C version code will contain those testcase.
    if you use the D version code to run this two testcase
    we will info you that:
        Rubbos testsuite is not updating anymore.
        This entrance for running Rubbos within Bottlenecks is no longer supported.

    Change-Id: I04e4042ff3998b3696df2ed47a9ffab6f1620ec3
Signed-off-by: liyin <liyin11@huawei.com>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Switch to qtip-cli for ci job

    Change-Id: Id485803a56a89ef1dd80d3597bcc10e7d70cd87a
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/qtip from branch 'master'
  - Remove prompt for teardown

    Interactive prompt will block automatic task execution in CI

    Change-Id: I435045186660ddda517f847e7cc33174e878da6d
Signed-off-by: Yujun Zhang <zhang.yujunz@zte.com.cn>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Merge "Add a new monitor type: MultiMonitor that can run any number of other monitors at the same time."
  - Add a new monitor type: MultiMonitor that can run any number of other monitors at the same time.

    JIRA: YARDSTICK-397

    Change-Id: Ic5cb79f0820029e306373abead1ea43fac9abee2
Signed-off-by: HuanLi <lihuansse@tongji.edu.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fix clean cmds in deploy

    Change-Id: I7da324903df1cc0c26cfba4433748dab459bbeb1
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Fix AArch64 nested Docker install

    Due to recent changes in official Dovetail Dockerfile,
    which is running on Ubuntu 14.04, we need some changes
    in our patch file for aarch64 in order to keep it working
    on 16.04.

    JIRA: ARMBAND-258

    Change-Id: Icff8c5a16d90ec4b67204a5b525a7896c796ca11
Signed-off-by: Alexandru Nemes <alexandru.nemes@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: add gerrit to deploy

    Change-Id: I9260d053c74584e1c80e880d73d8671e3515b4c2
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'master'
  - Create flavor from heat context

    JIRA: YARDSTICK-582

    Create a customizable flavor via heat context. All heat parameters
    are configurable including Core Affinity. The default flavor name
    is XXXX-flavor where XXXX is stackname. Flavor attributes are taken
    from the heat context file. If a flavor attribute is not used it
    takes default attribute value. If flavor name is not specified it
    uses the server name + "-flavor" or stack-name + "-flavor".

    Compute node specific attributes are configurable via "extra_specs"
    attribute. See
    https://docs.openstack.org/admin-guide/compute-flavors.html for
    details.

    Change-Id: If4015970b889b0b95bfa8eba9491ebf31e92f2c7
Signed-off-by: DanielMartinBuckley <daniel.m.buckley@intel.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fixes node parameters and git revision on verify

    Change-Id: I02243d359b4204ab38dee143332c8d1bac86ac8e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: adds missing deploy env vars

    Change-Id: I515afe7a8f230ebbece8ee4d99ca7744a6a35fb8
Signed-off-by: Tim Rozet <trozet@redhat.com>