Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Add allinone snapshot job

    Job will allow us to promote all-in-one snapshots.

    Change-Id: I0d0bec8e7598219e17df32bb05a4e8d6efbc52dd
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Test case descriptions for Tempest smoke tests

    Adding a high-level description of the Tempest smoke tests.
    As agreed on the last Dovetail call, we are aiming for a relatively low
    level of detail and instead point to available documentation. As the
    tests themselves are quite simple of read, this is the best,
    most concise, and up-to-date version of documentation we can find.

    JIRA: DOVETAIL-599

    Change-Id: I985592c55fd415e254e70db6c6480c7bf3670a29
Signed-off-by: dimitris.tsiolakis <dmts@intracom-telecom.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Update cli reference guide

    JIRA: DOVETAIL-713

    Change-Id: Ie740c8bf24c297c2537b23e1d35e0b4d40cd3e35
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Remove one sub test cases from neutron trunk

    There is one sub test case that can't work correctly on Mitaka,

    neutron.tests.tempest.api.test_trunk.TrunkTestJSON.test_create_update_trunk_with_description

    It will get a 'Bad request' error.
    Details: {u'message': u"Unrecognized attribute(s) 'description'",
    u'type': u'HTTPBadRequest', u'detail': u''}.

    That's mainly because of that,

    For Mitaka, there's only several extension resources that support
    attribute 'description', which is 'security_group_rules', 'security_groups',
    'ports', 'subnets', 'networks', 'routers', 'floatingips' and 'subnetpools'.
    All other extension resources including trunk port can't create with description.

    See https://github.com/openstack/neutron/blob/mitaka-eol/neutron/extensions/standardattrdescription.py#L22

    For Newton, all subclasses of class 'HasStandardAttributes' support
    the attribute 'description' including class Trunk.

    See https://github.com/openstack/neutron/blob/newton-eol/neutron/extensions/standardattrdescription.py#L49,
    https://github.com/openstack/neutron/blob/newton-eol/neutron/db/standard_attr.py#L158
    and
    https://github.com/openstack/neutron/blob/newton-eol/neutron/services/trunk/models.py#L26

    JIRA: DOVETAIL-723

    Change-Id: Ifdfea7c54a1888d933c8ddd78a6feea1db93368c
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Update user guide

    JIRA: DOVETAIL-710

    Change-Id: If6150e75202851e80b3b945743eca3362dba69c7
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Remove 2 sub test cases from neutron_trunk check list

    1. neutron.tests.tempest.api.test_trunk.TrunkTestJSON.test_create_update_trunk
    This test case will get the value of key 'revision_number' [1],
    While this is a new extension for Newton and not support by Mitaka.
    Please refer to the history of neutron github and the differences between
    mitaka tag [3] (which has no file revisions.py) and newton [4].

    2. neutron.tests.tempest.api.test_trunk.TrunkTestJSON.test_show_trunk_has_project_id
    This test case requires extension 'project-id' [5], while this is also a new
    extension for Newton. Please refer to the history of neutron [6] and the difference
    between mitaka tag [3] (which has no file project_id.py) and newton [7].

    Also it is a little unreasonable to check both tenant_id and project_id.
    For some products, they may only have either tenant_id or project_id (not both).
    Has sent an email to the neutron_trunk team but get no feedback until now.

    [1] https://github.com/openstack/neutron/blob/stable%2Fpike/neutron/tests/tempest/api/test_trunk.py#L123
    [2] https://github.com/openstack/neutron/commits/newton-eol/neutron/extensions/revisions.py
    [3] https://github.com/openstack/neutron/tree/mitaka-eol/neutron/extensions
    [4] https://github.com/openstack/neutron/blob/newton-eol/neutron/extensions/revisions.py
    [5] https://github.com/openstack/neutron/blob/stable%2Fpike/neutron/tests/tempest/api/test_trunk.py#L110
    [6] https://github.com/openstack/neutron/commits/newton-eol/neutron/extensions/project_id.py
    [7] https://github.com/openstack/neutron/blob/master/neutron/extensions/project_id.py

    JIRA: DOVETAIL-723

    Change-Id: Idb4a56d47148b14ae4674549f98b1be65e9b8f15
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Clean results directory to reduce the size of the package uploaded

    JIRA: DOVETAIL-726

    Change-Id: I57cb14cd5fe03a51e1691d7b48359bdd9b472ae4
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Create a test case descriptions for Patrole RBAC tests

    JIRA: DOVETAIL-682

    Change-Id: I37bb5ea2ba5b68407541e3e9d90d760e1720d3e7
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Test case description for Yardstick HA case

    This is test case description for HA
    test neutron-l3-agent. Yardstick TC058.

    JIRA: DOVETAIL-637

    Change-Id: I90e0225e6f086982da9f6ea686fbc8c179f45984
Signed-off-by: Mika Rautakumpu <mika.rautakumpu@nokia.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Test case descriptions for SNAPS smoke tests

    Adding a high-level description of the SNAPS smoke tests.
    As agreed on the last Dovetail call, we are aiming for a relatively low
    level of detail and instead point to available documentation. As the
    tests themselves are quite simple of read, this is the best,
    most concise, and up-to-date version of documentation we can find.

    JIRA: DOVETAIL-630

    Change-Id: I38b072e29ec4cfe50baf0ac3350ea1a1d3e8d67a
Signed-off-by: dimitris.tsiolakis <dmts@intracom-telecom.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix enable-condition on verify gate

    Change-Id: Id2ac2945af9a419303f21f74cca8eb513f90ce80
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Allow deploying csit env in verify

    This patch allows us to run a gate job against csit environment, by
    doing something like:
    start-gate-scenario: os-nosdn-nofeature-noha-csit

    Change-Id: I3041404cdfdffe159cff33ecd72be93fe9383e10
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Allow gating on allinone deployment

    This allows us to run a verify job on an all-in-one (control+compute)
    type of deployment.

    Change-Id: Ia4174c8eb5d55aaa05e63ddce59301e62b3a8a04
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: CSIT updates

    Changes-Include:
     - OPENSTACK_TOPO is now decided dynamically
     - Make the containerized start/stop commands more simple
     - Include CSIT logging in CSIT promotion

    Change-Id: I4b178cfd95cf45b808ab9e82b317b729e5f3028f
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix missing fetch job

    Change-Id: I4a14a7c6bc474b17b3bb04603187c18d0c8c1cf2
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Use CSIT to gate snapshot promotion

    Now that we have CSIT suite passing, we want to use that to gate our
    snapshot promotion rather than tempest.

    Change-Id: Ifddaf7921da15150a253021ee5ca64ab2fd438ff
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: CSIT disable live migration suite

    We do not currently use a shared storage backend for the libvirt VMs, so
    this won't work. Disabling for now.

    Change-Id: I1ed4658345a1cf23bc6665fc66beffc50d68aec3
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - remove fuel job in Doctor

    As Doctor has no fuel CI Pods avaiable now，remove the jobs which
    run in fuel Pods, these would be added again once the Pods are ready.

    Change-Id: Iadc32f68bb22809291fba2ab6ec729234711f525
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Fix CSIT robot suite paths

    Change-Id: Id40e0d433b0b22bb98f7471af28b6088879c160c
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: CSIT enable all suites

    Change-Id: Ib95a268ca478338b1358ec63baa1937325ee7a39
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Open CSIT testing ports in overcloud

    Port 12345 needs to be open so that a netcat server can respond to
    client requests.

    Change-Id: Iaf6e59bcb16a7afe329d522b80d6678e65f10140
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Override EXT* variables to be in 192.0.2.0/24

    Change-Id: I2ee7c37f492f712af3cd10b41ac8bdb6456843db
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Add external csit suite

    Change-Id: Ic2a237149af4cb8d5935a2b018c94b669cf380fe
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Fix ODL_STREAM to not include 'stable/'

    CSIT variable needs to be the branch short name. Also, removes duplicate
    log upload and fixes the upload path to use short name (to avoid '/' in
    path for branch)

    Change-Id: I5e1dac15fdbc1eca6c9edaf8b554c3362fd7a558
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: fix OPENSTACK_TOPO arg

    Change-Id: Ib12228bf149649ab8466906b2e6acea44111e954
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Apex: add bgpvpn scenarios to daily"
  - Apex: add bgpvpn scenarios to daily

    Change-Id: I4039dba21e2c74bfecafbcc5dd04880ab6bea0a2
Signed-off-by: Ricardo Noriega <rnoriega@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "use 'workspace-cleanup' plugin in publisher"
  - use 'workspace-cleanup' plugin in publisher

    Change-Id: I4db7c0cda5485dbc756a22b9cbde298612241274
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "clean the workspace in the publisher"
  - clean the workspace in the publisher

    As doctor run tox under root user, we need to clean
    the workspace in the publisher, otherwise the tests
    which come next will be fail when they operate in
    the workspace with jenkins user.

    Change-Id: I14fbabc7516153c6d93e53baf106067ff4194af6
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Use TOPO, not TOPOLOGY

    Change-Id: I86453397a6039c130281de83571489380fc0e309
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Change OS_DEPLOY to OPENSTACK_TOPO

    Change-Id: Ie9c2e9418dc7a2c8d6fcc798a9132303401a1128
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Reschedule the armband jobs

    Make the jobs run more often as we need more results in CI with the
    approach to MS5 and the release

    Change-Id: I7d868b004ebdb9dee5122d3cd92504290a7ce5f2
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[Dovetail] using correct rabbitmq process name"
  - [Dovetail] using correct rabbitmq process name

    Using the correct process name for the rabbitmq server in the HA test
    configuration.

    Change-Id: I42c8ba093f34c5d15f8c2e19b69538b22b716637
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - run tox with 'sudo'

    Change-Id: Icdbab7405e8dd46e7cd659dce04bf7502424192c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[dovetail] generate a results package for testing Dovetail web portal"
  - [dovetail] generate a results package for testing Dovetail web portal

    Change-Id: I3b9f06807ebf581e3f74286f479519937b75b06f
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Add OS_DEPLOY topology variable to pybot args"
  - Add OS_DEPLOY topology variable to pybot args

    Change-Id: I2fd7485b0938bfa481f9c24add704658aab210f8
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "auto: verify and merge jobs"
  - auto: verify and merge jobs

    Initial configuration of Auto specific verify and merge jobs
    triggered by gerrit events.

    Change-Id: I2d0fc7af31b1ec01f9a59eae875eb2df193d4fcb
Signed-off-by: Martin Klozik <martin.klozik@tieto.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Test case descriptions for Neutron Trunk Port tests

    Adding a high-level description of the Neutron trunk port tempest tests.
    As agreed on the last Dovetail call, we are aiming for a relatively low
    level of detail and instead point to available documentation. As the
    tempest tests themselves are quite simple of read, this is the best,
    most concise, and up-to-date version of documentation we can find.

    JIRA: DOVETAIL-684

    Change-Id: I76801b34f974bf7c77fded3ffa5588b7e5b2803c
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Add l3 suite to list of pybot suites

    Change-Id: Iaa085787ea92b002bb9fd1776f2ab20f63996769
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Get latest ODL csit code before running pybot"
  - Get latest ODL csit code before running pybot

    Change-Id: Ib502f79d657f8c3f5e7ac333d8487693eb20c4cd
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Enable Daily Fraser Dovetail scenarios

    Dovetail team still needs this for their next release.

    JIRA: APEX-623

    Change-Id: Idff3d5119bc0ae902595eb163b56a06c52c0d70b
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix stale GS pulls on artifacts

    There seems to be some delay in updating the HTTP server for GS which
    causes an old version of snapshot to be used. This change replaces using
    HTTP with gsutil to ensure we get the latest artifacts

    Change-Id: Iccca64aa9e904221621dfb2cb7471d24a3b3f4d9
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - First test case description for HA tests

    This is one of three test case descriptions from jira
    ticket. Test case description is TC010 it is TC056 in
    yardstick.

    JIRA: DOVETAIL-605

    Change-Id: I70afa882a667a6932aa7ec29bc5e0621b43fa0a4
Signed-off-by: Mika Rautakumpu <mika.rautakumpu@nokia.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Dovetail should update testcases.yaml file

    It failed to run trunk_port test case because of the wrong class name.
    See CI results

    https://build.opnfv.org/ci/view/dovetail/job/dovetail-compass-baremetal-default-mandatory-fraser/7/artifact/results/tempest_logs/dovetail.tempest.neutron_trunk_ports.functest.log/*view*/

    Update the testcases.yaml file based on the latest version of Functest Fraser.

    JIRA: DOVETAIL-715

    Change-Id: Ib102d1489d1e5610a04d76aab0553d5171ec3d3e
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "remove inspector variable form job template"
  - remove inspector variable form job template

    Change-Id: I472cad19a8ae81286a62e762c6caab653ca22d7c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "add the ssh_key info if the key_file is exist"
  - add the ssh_key info if the key_file is exist

    Change-Id: I7a95933e254b35fc7b26d649226192b8e4c407bb
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - run doctor tests with different inspectors in sequence

    As doctor tests have different inspectors, if they run in parallel
    of one multijob, they will operator one cloud to create/delete
    some resources, such as project, user, network and so on. It will
    cause some conflicts.

Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>
    Change-Id: I8111b28ad9de409542606f7be39a1ee0d838f8b6

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "prepare installer info for doctor test"
  - prepare installer info for doctor test

    Change-Id: I6344a31b28d3e5c9a998693fd64ec255410c62b6
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Renaming test cases to include test framework names

    Replacing the generic "dovetail" prefix of the testcase definitions with
    the name of the OPNFV test framework which hosts the test.

    JIRA: DOVETAIL-719

Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>
    Change-Id: I8f90423b8908197bdc7adddf82c61ff394893f52

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "use py34 for tox"
  - use py34 for tox

    Change-Id: I606e0de73e153de88d592a36d4eaabf1b4690e6c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - [armband] Disable fraser jobs and vping_ssh verify

    - Disabled fraser jobs as we no longer intent to cherry-pick changes to it

    - Now healthcheck includes vping_ssh, so remove it as a dedicated test for
    verifying patches on gerrit to avoid double checking.

    Change-Id: I6620dd9dc7db530ce8cf17474eee9608d78dd382
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - specify the cacert file when it exits

    Change-Id: Id122d99d6e599c31d3b5970aa88307843d379515
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - bugfix: wrong usage of '!include-raw'

    JIRA: DOCTOR-126

    Change-Id: Iabcd8a8ad14079e2ba7e72e39e009a0ee833cb3c
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - bugfix: wrong usage of '!include-raw'

    Change-Id: Ibbc1363bf5260301b33afad84244aa1d7af4ffce
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - use tox instead of functest for doctor CI jobs

    Change-Id: Ifbde5ebd12a7e7a040a0a3b2a3eeed532a11da73
Signed-off-by: dongwenjuan <dong.wenjuan@zte.com.cn>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[fuel] Remove vping_ssh testcase"
  - [fuel] Remove vping_ssh testcase

    Now healthcheck includes vping_ssh, so remove it as a dedicated test
    for verifying patches on gerrit to avoid double checking.

    Change-Id: I4daec677e7d1fdc65997f7a9ab580d5f93ece8a8
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[dovetail] Querying correct control node IPs"
  - [dovetail] Querying correct control node IPs

    The parameter used to query the host IPs of the database and message
    queue hosts was wrong, resulting in the corresponding HA tests to fail.

    Change-Id: I460209c63928ac99d5449adba03474fdf066ebcf
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[Dovetail] Fixing cinder process name on Fuel"
  - [Dovetail] Fixing cinder process name on Fuel

    Fixing the process name of Cinder on Fuel deployments.

    JIRA: DOVETAIL-688

    Change-Id: Ide672e6bafedeecc6b99a99263147fec5fab44ef
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Select the right Functest repos when master"
  - Select the right Functest repos when master

    Else OpenStack Rocky is verified by Queens upper-contraints.

    Change-Id: I5bfcb4895e64ab911c1131e8bfeb09eac2775754
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Fix log collection

    Change-Id: I11a9441b77973fc2225b14b2489b61ebf06a8b6b
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix CSIT promotion blocking

    Block on 3rd party odl netvirt jobs

    Change-Id: Icc67d13f9195ae3d62c77a909ee8e504c090bd40
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "CPERF: Adds log collecting job"
  - CPERF: Adds log collecting job

    Makes it so logs will always be collected even when CSIT itself fails.

    Change-Id: Ie854d92950edb515141343fd8b26216a010c55b4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Dovetail failed to archive tempest.log and tempest-report.html files

    It failed to archive tempest.log and tempest-report.html files.
    See CI results
    https://build.opnfv.org/ci/view/dovetail/job/dovetail-compass-baremetal-default-mandatory-fraser/7/artifact/results/

    That's because the path of them have been changed
    1. from tempest to tempest_custom
    2. from refstack to refstack_defcore

    There seems to be no file bgpvpn.log, remove the copy operation.

    JIRA: DOVETAIL-714

    Change-Id: I77d88124a44d3e5d869ada209760f69d1f6553bf
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - [compass4nfv] Change the network yaml for odl scenario

    Use network_odl.yml for odl scenarios.

    Change-Id: Ic12863acda112ed6ca7b39e83a820733e207729d
Signed-off-by: Harry Huang <huangxiangyu5@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Update netvirt verify tests

    Changes-Include:
     - Disable functest (we only care about csit passing for netvirt)
     - Fix trigger of csit job for other snapshot versions (always use
       master for now)
     - Fix csit always returning 0 even when tests fail

    Change-Id: I30a51fa391aac692b122f1ebf7bf73ffdb61ca29
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Disable host key check with ansible

    Also minor debug statements for snap deploy

    Change-Id: I9a6c2744ac9b9da920666f84c05e46af858613e6
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Delete 2 sub test cases from patrole

    These 2 test cases failed on OSP10 with reasons
    1. Provided object does not match schema 'image': u'shared'
       is not one of ['public', 'private']
    2. Provided object does not match schema 'image': u'community'
       is not one of ['public', 'private']

    'shared' and 'community' was added in the Image API v2.5

    https://developer.openstack.org/api-ref/image/v2/index.html#images

    JIRA: DOVETAIL-704

    Change-Id: Ie7ab06d5e2abe7bde25fdb7318abe341f0119bc7
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Update bottlenecks conf

    1. Copy a ubuntu image to Bottlenecks to support offline
    2. Add an env DEPLOY_SCENARIO to bottlenecks to support DPDK
    3. Set push results to DB False

    JIRA: DOVETAIL-706
    JIRA: DOVETAIL-707

    Change-Id: I81f293bb9fddc63fd8be455546ba4642ca670fc7
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Create a test specification for vIMS test case

    New test specification has been created for dovetail project.
    Test descriptions is related to cloudify_ims test case of functest
    project.

    JIRA: DOVETAIL-699

    Change-Id: I033351ad7cf83256bd7a9e208a7ce406d5a4cd2b
Signed-off-by: Panagiotis Karalis <pkaralis@intracom-telecom.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Cleaning up proposed-tests test suite

    We have moved all newly proposed tests to the next OVP test suite, so
    these tests do not need to be in here anymore - and do not need to be
    run in CI.

    Change-Id: I5f51b76a37b706c5b4abc75272ad799a72841f67
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Use computes + control for NUM_OS_SYSTEM

    This is not going to work when we want to make our HA
    CSIT work, since I think Apex will be having 3
    openstack control nodes, and our CSIT won't know what
    to do with '5' (3 control + 2 compute) openstack
    nodes. But, we can cross that bridge when we get
    there.

    Change-Id: I9c74b2ec73e5af0039d93f9ed812fc3c100a3e4a
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: fix flavor syntax for csit

    Change-Id: Id3430db201ba82b398c3e74f5c3cbb541c6fb208
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Create flavor for CSIT

    Change-Id: I2dd2fe40f06783320c60788b2161e876a0bb43b5
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Fix cirros image name for csit

    Change-Id: I61ffe3d058ff797878d2ef00e5801497f91ea436
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Fix path issue with cirros uploading

    Change-Id: Ia58fcaae637d9be75b331404648724b82ac16498
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Upload cirros image for CSIT

    CSIT does not have the ability to upload cirros image yet, so this patch
    uploads it to the overcloud as a workaround.

    Change-Id: I277e37ae28d613771969dca984ef8692e1312fbd
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Move OVP web portal code to a separate repo

    The new repo for web portal is https://gerrit.opnfv.org/gerrit/dovetail-webportal

    JIRA: DOVETAIL-671

    Change-Id: Iac085abc3d175b9a091d70d0448af56c7a6845e9
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Making the results file a proper json file

    The results.json file is currently not a properly formated json file,
    but contains one json structure per line/testcase. Whit this change, all
    test results are being collected at runtime and then written to a
    properly formated json file at the end of a test run.

    Moreover, this patch introduces 'mandatory' and 'optional' sections to
    the test suites definition files in order to clearly indicate if a test
    is part of the corresponding test scope.

    The web portal needs to be adapted accordingly to be able to read the
    new results file.

    JIRA: DOVETAIL-672

    Change-Id: Id0706c7e82622fc9c2c2fece26b2d6c07c1580be
Signed-off-by: Georg Kunz <georg.kunz@ericsson.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Log where the robot files are being uploaded to

    Change-Id: I4f933d18c47fff80923d3d79320f0bb873efb2e7
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Upload robot logs to gs

    Change-Id: I78989fcfd155054d8470359c59f682eb4ba3ea80
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Delete skipped sub test cases from patrole and neutron_trunk check list

    According to Apex, Compass, Fuel CI results, delete the skipped sub test cases
    from patrole and trunk_port check list.

    JIRA: DOVETAIL-703

    Change-Id: I86e3036a287d9cf56d78e43f92ce0d9ffed5941c
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: minor fixes to csit

    Change-Id: I16b4859922a6efec2748190234967409b61c1f68
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - CPERF: Fix cleaning cloned folder

    Change-Id: Ie933308557023877b19e43bbde95470c2bf159ca
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Cperf: Add debug messages to execution

    Change-Id: I2089414e0fd2151b53da29ea01de3dd1292c078e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix invoking snapshot node parser

    Change-Id: I12da71b17a0a423b501508b51ab3d614c87f8851
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Correct functest container with snapshot

    If OS_VERSION is master we want to pull ollivier containers, otherwise
    we can pull OPNFV.

    Change-Id: I6e838a85c6b7918540c8bc3ca2d5e790e5aa7a57
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: fix overcloudrc unsetting OS_VERSION

    Sourcing overcloudrc is unsetting OS_VERSION causing failures in csit
    job:
    https://build.opnfv.org/ci/job/cperf-apex-csit-master/1/console

    Change-Id: Ife3b4795832ecdad75bcb41f0721ef8391aafcac
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Remove functest_testsuite and functest_testcase in dovetail_config.yml

    The 2 sections 'functest_testsuite' and 'functest_testcase' are used by
    all Functest test cases.

    They aim to parse the results of Tempest sub test cases.

    Remove them, and check the sub test case list,
    1. if it's empty, that means no need to check sub test cases
    2. if it is not empty, check the sub test cases one by one.

    Additional, remove some useless keys in dovetail_config.yml

    JIRA: DOVETAIL-658

    Change-Id: Ic829264b0c8eaedd8e2b3fa55b38a34644482c20
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: run csit before tempest

    Change-Id: I66c0b128fb958285b4bff112586fc45366257256
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Remove snapshot workarounds

    There's no need to install java or do the docker workaround anymore
    after fixes into Apex:
    https://gerrit.opnfv.org/gerrit/#/c/60053/

    Change-Id: I3d7d5fcc066bfb4416fcd3404c89e6e814dbf31e
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Change default verify scenario

    Since our default scenario os-nosdn-nofeature-ha is failing functest in
    verify, switch to os-nosdn-nofeature-noha which is passing. We want the
    lowest bar possible for initial patch set verification and then can use
    gate to verify more complicated deployments.

    Change-Id: I9788495de5ee728fa3c19264120315e562d2712d
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[Dovetail] Bugfix: Dovetail CI jobs failed on compass"
  - [Dovetail] Bugfix: Dovetail CI jobs failed on compass

    Change-Id: I1b46fe380b12552651c786b10f162111d4605353
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Removes branch from functest scenario

    Branch is messing up functest detection of deploy scenarios. Therefore
    this patch removes the branch from the scenario before passing it to the
    test job.

    Change-Id: I1b59125941e839f1937cba565c73e39efb460573
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix OS branch detection on snapshot promotion

    Change-Id: I4f860f9b9adcc96d94b1daa333eec7a746bc91b1
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: More snapshot fixes

    Changes-Include:
     - Use correct csit env file with promote jobs
     - Ensure odl container starts when snapshots brought up
     - Use SDN_CONTROLLER_PASSWORD for ODL pass rather than
       hardcoding admin

    Change-Id: I910a4eefa2b4c621e3f82939bedee338fad91bf3
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Update CI Resources and Requirements"
  - Update CI Resources and Requirements

    Indicates what requirements each resource type should meet in order to
    be considered part of OPNFV CI along with listing of the resources
    available.

    Includes a list of labels applied to servers and their intended use.

    JIRA: RELENG-403
    Change-Id: I0ba2671e95e29141d051019938fba930a42e7f56
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[Dovetail] Edit the job's name of Dovetail running on Apex"
  - [Dovetail] Edit the job's name of Dovetail running on Apex

    Change-Id: I92b8bbef1a979c16a9c62f1affe43817214936a4
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - [Dovetail] Edit the job's name of Dovetail on Fuel

    Change-Id: I6a2b571ca2696f9466a4588b7e4deef13b947eae
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/dovetail from branch 'master'
  - Create test case descriptions for Bottlenecks stress test

    This is coming from the former patch
    https://gerrit.opnfv.org/gerrit/#/c/37715/

    JIRA: DOVETAIL-631

    Change-Id: Ibe090fefaa92cb3fe6d7c3d96296724e8cfbcf1d
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[dovetail] Run mandatory and optional test cases with 2 jobs"
  - [dovetail] Run mandatory and optional test cases with 2 jobs

    JIRA: DOVETAIL-694

    Change-Id: I19928d57c14f99e5c3ed7725fbe3476096b1674c
Signed-off-by: xudan <xudan16@huawei.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[dovetail] Add TESTAREA to support run mandatory or optional test cases"
  - [dovetail] Add TESTAREA to support run mandatory or optional test cases

    JIRA: DOVETAIL-694

    Change-Id: I4d2f4342bb10b5199c0dd1ed6ee579df14cb1517
Signed-off-by: xudan <xudan16@huawei.com>