Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge changes from topic 'prox-stable/fraser' into stable/fraser

    * changes:
      NSB NFVi PROX BNG losing many packets
      NSB NFVi PROX VPE losing many packets
      Decrease Sampling interval
      Addition of Configurable Sampling and Configurable Confirmation Retry

  - NSB NFVi PROX BNG losing many packets

    JIRA: YARDSTICK-1101

    Problem was incorrect generator and changed the traffic profile to allow
    a tolerated loss of 5%.

    ARP packets are not managed (just passed thru the system) therefor the
    tolerated loss must be higehr than normal.

    Change-Id: I03bd62b397a66b50961e810d033c6894d0b3e9a6
Signed-off-by: Daniel Martin Buckley <daniel.m.buckley@intel.com>
    (cherry picked from commit 48c9e48dcff498c8f51ec507d4107bc658b82d82)

  - NSB NFVi PROX VPE losing many packets

    JIRA: YARDSTICK-1105

    Running a vPE test ends up with up to 25% drooped packets.
    This is due to tolerated loss being incorrectly configured,
    test duration was too short and test interval was too
    short.

    Note This is due to the fact that vPE use case have by
    default a tolerated loss of 100%, Now changed to 0.001,
    same as L2FWD

    Also: Grafan dashboard has been updated to show all SUT
    CPUS Utilization in 1 panel. And LINE rate MIN, MAX & TEST
    Rate have been added

    Change-Id: I7adae2199b3f656fe460705b6aeb3aa69c767d50
Signed-off-by: Daniel Martin Buckley <daniel.m.buckley@intel.com>
    (cherry picked from commit 39b3d9ae8ff19a0d64bff0e874f05b6dbcc30b01)

  - Decrease Sampling interval

    JIRA: YARDSTICK-1219

    Currently NSB for NFVI using PROX returns sampling information every 13
    seconds.

    This is too slow.

    It is required to return sampling information form Generator AND VNF at
    least every  1 second.

    This change is depandant on JIRA: YARDSTICK-1212 and YARDSTICK-1220

    Change-Id: Ica7ab795a2919d191d8cd846d028e15739e33fb7
Signed-off-by: Daniel Martin Buckley <daniel.m.buckley@intel.com>
    (cherry picked from commit f8b45aca386ed5852d9568c531ba4595c68cc0e2)

  - Addition of Configurable Sampling and Configurable Confirmation Retry

    JIRA: YARDSTICK-1221

    In order to increase accuracy of result the following are done :-
      - Improve Measurement Accuracy (YARDSTICK-1212)
      - Improve Sampling Interval (YARDSTICK-1219)
      - Allow 4 PROX ports to be read simultaneously (YARDSTICK-1220)

    This change does the following :-
      - Stores LINE Rate statistics of Sample
      - Requires a confirmation retry before deciding to increase or
        decrease this is configurable.
      - Allows the user to disable Sampling or specify a sample interval
      - Added Code Coverage of ProxDurationRunner based on YARDSTICK-1199

    Change-Id: I27242ac1849c9a2712866385b5fbc05977c71516
Signed-off-by: Daniel Martin Buckley <daniel.m.buckley@intel.com>
    (cherry picked from commit 2e447af9a5a54355aa20028813660d07d1bd2e18)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Convert SLA asserts to raises" into stable/fraser
  - Convert SLA asserts to raises

    This commit converts Python assertions to a custom exception in all
    places where SLA validation is checked with an assertion.

    This commit also fixes all emerged pylint errors.

    JIRA: YARDSTICK-966

    Change-Id: If771ed03b2cbc0a43a57fcfb9293f18740b3ff80
Signed-off-by: Miikka Koistinen <miikka.koistinen@nokia.com>
    (cherry picked from 39f80e9b06395ae1515cfcf08508504ad4dd978a)

Update git submodules

* Update docs/submodules/sdnvpn from branch 'stable/fraser'
  - Clean up stale routers and gateway routers.

    During snaps_smoke test all floating IPs are allocated
    by routers as external IP's, as a result there are no
    more floating IPs left.
    This patch clean up stale routers and free the assigned
    IPs.

    JIRA: SNAPS-318

    Change-Id: Ifbf01ce38db63315e692dca9ffa5d993dbfa4337
Signed-off-by: dimitris.tsiolakis <dmts@intracom-telecom.com>
    (cherry picked from commit 71737f23f718791a554edf374ee0c28bb77c9773)

Update git submodules

* Update docs/submodules/samplevnf from branch 'stable/fraser'
  - Updating release notes for OPNFV Fraser 6.2

    Change-Id: I9a9da79cb4ccb245ddb38b50b561da51a40a359d
Signed-off-by: Deepak S <deepak.s@linux.intel.com>

Update git submodules

* Update docs/submodules/samplevnf from branch 'stable/fraser'
  - Adding support for Ubuntu 17.10...

    Change-Id: I9a9da79cb4ccb245ccb38b50b561da51a40a359d
Signed-off-by: Deepak S <deepak.s@linux.intel.com>
  - Adding centos.json to be used with packer to generate a VM with PROX

    Based on a CentOS cloud image downloadable from the web, you can now use
    packer to create an image that has DPDK and PROX installed in the
    proper directories. The VM is also tuned for guest VNFs.
    A service is also created to deal with the proper isolated_cpu settings
    for tuned. The service will also make sure uio and igb_uio are loaded.
    The prox_user_data.sh is not needed any more and hence deleted.
    ctrl-c of runrapid.py will now also stop prox in all the VMs so a new
    test can be started.

    Change-Id: I16cc59878e2d4912757f42e05f98d51dff5feb89
Signed-off-by: Luc Provoost <luc.provoost@intel.com>
  - TempFix: vCGNAPT/vACL ipv4 perf issue

    Change-Id: I924fcac7a65c0d221d5d422f419deb9c0f864172
Signed-off-by: Deepak S <deepak.s@linux.intel.com>
  - Temp Fix for vFW perf issue

    Change-Id: I324fcac7a65c0d221d5d422f419deb9c0f864172
Signed-off-by: Deepak S <deepak.s@linux.intel.com>

Update git submodules

* Update docs/submodules/sfc from branch 'stable/fraser'
  - Update release notes for Fraser 6.2

    Depends-On: https://gerrit.opnfv.org/gerrit/#/c/59177/

    Change-Id: I0d56aa4d5f494a25db92e61415a24b4257c71a04
Signed-off-by: Manuel Buil <mbuil@suse.com>
    (cherry picked from commit a52c05a07b2a01b8c911537d29c995fb42f66972)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Fix unset RC_FILE_PATH in Scripts"
  - Fix unset RC_FILE_PATH in Scripts

    Even though RC_FILE_PATH is defined in Jenkins as passed in as a
    parameter, bash still sees it as unset. Removing the 'nounset' option
    from these scripts should allow the check to success (RC_FILE_PATH set
    to blank).

    Change-Id: Ibcfdcf0d2a12c8119d2fe3ec3b354be782338bd5
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Fix the output of repo list to be 'repo, tag, ref'

    This was changed in a previous commit and causes calls to 'git branch'
    during the verification job to fail.

    Change-Id: I71c248abecf030658371b810d403e1f460933946
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - cosmetic change to R6.2 Release Notes

    JIRA: AUTO-41

    forgot blank line before list of notable activities
    (line 277); opnfvdocs rendition did not look good;

    Change-Id: Ic5073e5021164c27fdcccab4b11fd8f375bfeeaf
Signed-off-by: Gerard Damm <gerard.damm@wipro.com>
    (cherry picked from commit f2b7433b3f20299d935c42e978d56703b11eb17b)

Update git submodules

* Update docs/submodules/armband from branch 'stable/fraser'
  - u/fuel: Bump & rebase for MaaS region fabric

    Change-Id: Iddd9591507b3985625cce31c3740deabd3eeded2
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Fix Git URL Parameter for Release Merge Job

    This was incorrectly set to GIT_BASE, which includes the Project name,
    and should be set to GIT_URL, which does not. GIT_URL is used instead as
    each release file can contain multiple repos.

    Change-Id: I82b5e80f20f8999745cb5008c8057c81c4993574
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "R6.2 updates for Auto Release Notes and Configuration Guide" into stable/fraser
  - R6.2 updates for Auto Release Notes and Configuration Guide

    JIRA: AUTO-41

    Several updates in Release Notes and Configuration Guide, to capture
    changes and progress since R6.1.
    Included tickets 35,37,40, since they can still be done for 6.2.

    Patch 2:
    made updates based on comments (note: need to close by 6/28)

    Patch 3:
    minor edits, will merge today

    Patch 4:
    removed Jira tickets 35, 37, 40 from Auto release 6.2

    Change-Id: I7547a9ea9b807c28513ce4e995d53a9f32223eb1
Signed-off-by: Gerard Damm <gerard.damm@wipro.com>
    (cherry picked from commit d2a98b6fba905cd3de79c0b1c35021423b9dda9f)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "ci: Support for pylint and yamllint" into stable/fraser
  - ci: Support for pylint and yamllint

    A support for pylint and yamllint checks was introduced.
    Checks can be executed manually by invocation of ./check
    script (see script usage for more details). Automatic lint
    checks were integrated info VERIFY and MERGE job bodies.

    TODO:
    Improve pylint ratings of python code. Some issues can
    be fixed in python files or by relaxing pylint settings.
    However dependencies on ONAP includes can't be easily fixed.
    Thus pylint checks should be set as non-blocking at the beginning.

    Change-Id: I82a6a266b8003ae5d70f4f2a88ecc96817b97ac0
Signed-off-by: Martin Klozik <martin.klozik@tieto.com>
    (cherry picked from commit 6c1bcb7f02e4159bef21154341a9268f38bce438)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Fix formatting in INFO.yaml file

    Soon we will have a valiadator that will not
    allow errors like this to be merged.

    Change-Id: I6d65f30376afe0e2b6da768f488888aed15bdb22
Signed-off-by: Aric Gardner <agardner@linuxfoundation.org>
    (cherry picked from commit b2b0c6cf161af535a185cdc8779ab9ddbeaeb335)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "docs: Fix long lines" into stable/fraser
  - docs: Fix long lines

    OPNFVDOCS scripts set max line length to 240 chars. This patch
    shortens long lines to avoid rst validation warnings during Auto
    docs generation.

    Change-Id: I124e3ea3aa04bc7fc8c2f5cf25ce9c75fdcef330
Signed-off-by: Martin Klozik <martin.klozik@tieto.com>
    (cherry picked from commit bf21f3086791419abd713757ec85d0b9a77312d5)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "update of config script using new release of OpenStack SDK" into stable/fraser
  - update of config script using new release of OpenStack SDK

    JIRA: AUTO-38

    - Issues in OpenStack SDK 0.13 were fixed in new release 0.14
    - revisited the script, made some changes (delete interfaces before
      deleting router)
    - Script now fully works: creates all objects, and can be used also
      for deleting (in a clean-up job for example)
    - resilient to re-runs: can attempt to re-create, won't crash if
      objects already exist (existence tests work, thanks to SDK 0.14
      fix). Likewise, can attempt to re-delete (no crash).

    - next steps will be:
      * update created objects based on ONAP-B requirements
        (current: still from Amsterdam; should be quite similar)
      * script to ensure Python3 and SDK are installed, and to
        ensure files are there (clouds.yaml, .img)
      * chain in CI pipeline: Fuel/MCP install, and this script

    Patch 2:
    made changes to address the comments
    - fixed the summary (works in any execution case), tested on hpe12
    - researched the URL support (use image proxy), but did not try yet
    (need to merge this for 6.2)

    Change-Id: Ibf647e33428c98a6fec17eda0a41e9ee11cc8085
Signed-off-by: Gerard Damm <gerard.damm@wipro.com>
    (cherry picked from commit c8f22d584e6bb23634d12e40d66400a718d5cbc7)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "checked code logic for UC2-vim001 recovery time measurement" into stable/fraser
  - checked code logic for UC2-vim001 recovery time measurement

    JIRA: AUTO-38

    Leveraging new OpenStack SDK release 0.14, tested existing code for
    UC2/vif-001 (simulated VM failure), to verify that generic code for
    recovery time measurement works.

    Entered test code in placeholders for this test case: challenge start
    (suspend a VM), challenge stop (resume, although this was done
    outside (from Horizon), to simulate an ONAP-controlled recovery),
    test code (periodic status check, stop when VM is active again).
    Time was measured correctly, output files (.csv) were created
    successfully.

    This will allow to close Jira ticket 38.

    Next steps will be to interface with ONAP, to obtain VNF info
    (especially the ID of the corresponding OpenStack VMs), and perform
    the same measurement, which this time will be an actual recovery
    time, provided DCAE data collection, Policy and CLAMP have the
    proper configuration.

    Change-Id: I7320f7570c119d2b59d1ed6ca787ba975ad04a44
Signed-off-by: Gerard Damm <gerard.damm@wipro.com>
    (cherry picked from commit dffc2bee5650b10831f3792b162b6ea73a4624ae)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "ci: CI helper script" into stable/fraser
  - ci: CI helper script

    Skeleton of CI helper script. This script implements the body
    of AUTO CI jobs. It is executed from AUTO job definitions
    used by the OPNFV Jenkins.

    Change-Id: I17984293b795a0fe90bff8f9e06a8a82176c1612
Signed-off-by: Martin Klozik <martin.klozik@tieto.com>
    (cherry picked from commit bea663873a193b0b0d8deedd8ea579339598a5be)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Fix Typo in repos release script

    As the scripts are ran under Python 3, parenthesis are required around
    print statements. Adding these doesn't seem to cause in error in Python
    2.

    Change-Id: Ic0ce623ded5f3e3f27c8117e2067566afc8d8c0b
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - Merge "adding Mohan, removing Madhukesh" into stable/fraser
  - adding Mohan, removing Madhukesh

    In a phase of refreshing list of Auto committers.

    First batch: add Mohan, remove Madhukesh.
    Mohan: which email to use (mvista or gmail); and need your LF ID.

    Next batch: add Martin, Richard, Cristina, Paul, Joe
    (voting in progress), and review all list

    Does the "INFO" file need to be deleted (since "INFO.yaml" is the reference) ?

    patch 2:
    - updated Mohan's LFID
    - added entries for Joe, Cristina, Paul, Martin, Richard
    - still need LFIDs from Paul, Richard
    - seems INFO can be deleted indeed; will do during final patch
      (delta: about 6 names in INFO not in INFO.yaml)

    patch 3 (June 14th):
    - updated LFIDs for Paul, Richard
    - updated INFO, but not deleted yet; grouped names not in INFO.yaml;
    - INFO.yaml ready to be merged, pending TSC approval process

    Change-Id: Ie34283faebbab99afbed731d7ac92309518e3b03
Signed-off-by: Gerard Damm <gerard.damm@wipro.com>
    (cherry picked from commit 07a61a49978c842ba6b3e6a31a6a0f127084c639)

Update git submodules

* Update docs/submodules/auto from branch 'stable/fraser'
  - gitignore: Ignore docs generation dirs

    Update .gitignore file to ignore OPNFVDOCS scripts and directories
    used for docs generation.

    Change-Id: I8a8476677b4f3d488d8b09b4eb17d98cad8e77bd
Signed-off-by: Martin Klozik <martin.klozik@tieto.com>
    (cherry picked from commit cc722289a74012c2f76a683f7fb6ca1904c85e93)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Doctor Fraser opnfv-6.2.0"
  - Doctor Fraser opnfv-6.2.0

    Change-Id: I9f61914d3c07ca52e9b062110a2d0036090b3626
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Disable SFC verify job in fraser branch

    We would like to disable the SFC verify job for fraser branch
    because jenkins give us -1 on new patches on stable fraser branch
    because of the lack of tox on that branch.

    We are not going to submit any new patches on the SFC fraser branch from
    now on except from one [0]. So we can disable the fraser job as an easy
    fix to the -1 jenkins-ci problem in gerrit.

    [0]: https://gerrit.opnfv.org/gerrit/#/c/59175/

    Change-Id: Iab2cb1eea6ac14f262ca25bc3cc61e15556f21e9
Signed-off-by: Dimitrios Markou <mardim@intracom-telecom.com>

Update git submodules

* Update docs/submodules/storperf from branch 'stable/fraser'
  - Merge "Fixes daily run" into stable/fraser
  - Fixes daily run

    Change-Id: I8f17efe0d0866a3dc6ecbbabe07985b93ac445e6
Signed-off-by: mbeierl <mark.beierl@dell.com>
    (cherry picked from commit 3c14f6cf6344c4a83aa7c4f586db39bb69a5d93e)

Update git submodules

* Update docs/submodules/storperf from branch 'stable/fraser'
  - Use MultiThreaded SNAPS

    Take advantage of multiple threads in SNAPS to get info on the
    stack more quickly.

    Change-Id: Ifbfaec4fb6f1a4a322c327176c82200b5f69d874
    JIRA: STORPERF-245
Signed-off-by: mbeierl <mark.beierl@dell.com>
    (cherry picked from commit fa0e1935f3f0b6da79666963e5937c8402100287)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Extended Context class with get_physical_nodes functionality" into stable/fraser
  - Extended Context class with get_physical_nodes functionality

    JIRA: YARDSTICK-1255

    Change-Id: I446d715dc6cf716a4fcbc1b809c1b1d6303071e0
Signed-off-by: Chornyi, TarasX <tarasx.chornyi@intel.com>
    (cherry picked from commit 595212edf5ccd71af1bf7ef57a8d260fb1ec0c9e)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Add "os_cloud_config" as a new context flag parameter" into stable/fraser
  - Add "os_cloud_config" as a new context flag parameter

    This new parameter will contain the OpenStack cloud specific configuration
    used by Shade client. This new flag is used only in Heat context.

    By default, this new parameter (dict) will contain this content:
      'os_cloud_config': {'verify': False}

    This field will be used by HeatStack [1] to create a Shade cloud. Shade
    retrieves, if not defined, the OpenStack configuration from
    "os_client_config". This configuration is used to generate the cloud
    configuration, which is the description of the OpenStackCloud returned.

    The default parameter defined, "verify", refers to the related bug. By
    default, in case of using SSL certificate it will not be verified.

    [1] https://github.com/opnfv/yardstick/blob/b338d3091bb0beb89d4ad9f7c144f43a31a19a74/yardstick/orchestrator/heat.py#L47

    JIRA: YARDSTICK-1139

    Change-Id: I875a7018401b84e51dab775b8194174645d27e06
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 9ae331e1aa1081c3e821512d1940846dfb4063ec)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Stop running tests from tests/unit" into stable/fraser
  - Stop running tests from tests/unit

    Since all tests have been moved into yardstick/tests,
    temperary code to run tests in both tests and yardstick/tests
    should be removed.

    JIRA: YARDSTICK-837
    Change-Id: I3bf3c9ece9bc8457d992e53ee8cc5cadb1dec8f0
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry-picked from commit 64add9a435e9455b3bff6971d2717857cdce8193)

Update git submodules

* Update docs/submodules/sdnvpn from branch 'stable/fraser'
  - update sdnvpn release notes for fraser 6.2

    Change-Id: I752fba0ba0d434ae1bc37b975479361f9d53e3b3
Signed-off-by: Periyasamy Palanisamy <periyasamy.palanisamy@ericsson.com>
    (cherry picked from commit b5e7619baeecec2494994caba86df275fa197c99)

Update git submodules

* Update docs/submodules/fds from branch 'stable/fraser'
  - Update release notes for Fraser 6.2

    Change-Id: I5905ac0e35dc025f665ce33263b92242097ee5f1
Signed-off-by: Onong Tayeng <otayeng@cisco.com>
    (cherry picked from commit 406d71e14b99b92db10bf6dc7137970baf6324cf)

Update git submodules

* Update docs/submodules/functest from branch 'stable/fraser'
  - Modify config_patch.yaml according to the new snaps config

    It allows verifying ovs scenarios via snaps.

    JIRA: FUNCTEST-984

    Change-Id: I0fedadc0b9e265c424ae3221469b8d28b9a68afa
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>
    (cherry picked from commit 06caf7c89f3a49185e9b9c1cfe40720b25ee2bc2)

  - Config flavor metadata via functest - docs update

    Related to the merged patch :
    "SNAPS via functest with flavor metadata configurable"

    Functest documents are updated accordingly.

    Change-Id: I874f041935f64b7240a5ec5de6e9c89b0f4a09fd
Signed-off-by: Panagiotis Karalis <pkaralis@intracom-telecom.com>
    (cherry picked from commit a62dc183e6a916095b31f22a294d8f81306bf23b)

  - SNAPS via functest with flavor metadata configurable

    The required data for the SNAPS flavors are sent through
    the config_functest yaml file in order for the SNAPS scenarios to be
    configured accordingly.
    If the config_functest yaml file includes empty flavor_extra_specs
    or there is not included this parameter, the SNAPS scenarios will be
    executed using the hardcoded value.

    Change-Id: I4ef46d1fe93497d658414170a72c4520d8f37808
Signed-off-by: Panagiotis Karalis <pkaralis@intracom-telecom.com>
    (cherry picked from commit 5a94beb62293151ef6f4e94ed500579de1f3673e)

Update git submodules

* Update docs/submodules/samplevnf from branch 'stable/fraser'
  - Get multiple port stats simultaneously

    JIRA: YARDSTICK-1220

    Implemented new "multi port stats <port list>" command, which returns a
    semi-colon-separated list of comma-separated values:
    - port id
    - total (at last_tsc) for rx_pkts, tx_pkts, no_mbufs, ierrors + imissed
    - last_tsc

    Change-Id: I8a8da79cb4ccb245ccb38b50b561da51a40a359d
Signed-off-by: Patrice Buriez <patrice.buriez@intel.com>
    (cherry picked from commit a9d9979b1f5b7435552ae884da69220a42b81f81)
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Bugfix: HA kill process recovery has a conflict" into stable/fraser
  - Bugfix: HA kill process recovery has a conflict

    It happens in Nokia SUT when running in the Plugfest. The problem happens when
    the start_process start to recover the killed process (like nova-api), but the
    self-cured mechanism already recovered. And somehow it lead to a conflict and
    has problems.
    So the recover of the HA attack-recover should be improved to only recover it
    when it needs to.

    JIRA: YARDSTICK-1222

    Change-Id: I1acb5a7d59d6fe4e0de0b0c5942fa89e051dd1ff
Signed-off-by: rexlee8776 <limingjiang@huawei.com>
    (cherry picked from commit 736f3fa5d52345d6fe5174b83de043f779fa0600)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace glance delete image with shade client." into stable/fraser
  - Replace glance delete image with shade client.

    Remove get_image_id function.
    Function delete_image now uses shade client.

    JIRA: YARDSTICK-892

    Change-Id: I6e8510dfa49aa14786ed7ac3382b85c4e699fb9e
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit d6c1b8b7bfd257efd5fe2df30dd450bdb2c57c7d)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace glance create image with shade client." into stable/fraser
  - Replace glance create image with shade client.

    Function create_image now uses shade client.

    JIRA: YARDSTICK-892

    Change-Id: Ia41d9ce702a1f24031080f8a365c1b2bd9ac9faa
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit c31edc5ab9013d93ffd32ed72adb14740e43b24a)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace cinder detach volume with shade client." into stable/fraser
  - Replace cinder detach volume with shade client.

    Function detach volume now uses shade client.

    JIRA: YARDSTICK-891

    Change-Id: Ie437ccf1172cb82dc869963f0d62e31a5ab23ebb
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit f6cca46f6b1aa6134a0e634a3a9e524cdbbfa729)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace cinder delete volume with shade client." into stable/fraser
  - Replace cinder delete volume with shade client.

    Function delete volume now uses shade client.

    JIRA: YARDSTICK-891

    Change-Id: I016e1d3bf5972879cad176b56c7282e35413945e
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 4c672aa7012a530806a2f8ff2d45a8badb7f7b21)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace cinder create volume with shade client." into stable/fraser
  - Replace cinder create volume with shade client.

    Adds get_volume function.
    Function create volume now uses shade client.

    JIRA: YARDSTICK-891

    Change-Id: I0b2fae5f2cf52eaf2e4a0062c858d49bc4ce9ccd
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 2d33d0f289f3dd3864fe57289e953b876f362c06)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace cinder get_volume_id with shade client." into stable/fraser
  - Replace cinder get_volume_id with shade client.

    Function get_volume_id now uses shade client.

    JIRA: YARDSTICK-891

    Change-Id: I45ae40982a64f677dbbdeb6c9510a0ec9ac973f1
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit be197a6197e803b6334f2ccf72f561245ef7aac7)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova get flavor with shade client." into stable/fraser
  - Replace nova get flavor with shade client.

    Rename get_flavor_by_name with get_flavor.
    Function get_flavor now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: Ic82127e475baf39643be0a254b177f3058b85748
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 35bbd618b1e69a5b5edbd64a333720bfa5a92400)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova get server with shade client." into stable/fraser
  - Replace nova get server with shade client.

    Rename get_server_by_name with get_server.
    Function get_server now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: I69c59145cefdb565f3ece27baaaf932905e1b757
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit d75a91ebf2937e5cfe5cf2aa5a90db9121f73967)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova attach volume to server with shade client." into stable/fraser
  - Replace nova attach volume to server with shade client.

    Function attach_volume_to_server now uses shade client
    instead of nova client.

    JIRA: YARDSTICK-1088

    Change-Id: Id00df672c2c195b5c338cbbc30ddf2742a4e4d29
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 8fd82cd8d0146d8cebbc32ed7cbb6fb9d1861297)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova delete keypair with shade client." into stable/fraser
  - Replace nova delete keypair with shade client.

    Function delete_keypair now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: I46b895748c5c44b0bf7d5b035395676ebff48d7f
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry pick from commit aded0fdb30caf035e0eb94c1216f436ba597c2c7)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova client create keypair with shade." into stable/fraser
  - Replace nova client create keypair with shade.

    Function create_keypair now uses shade client instead
    of nova client.

    JIRA: YARDSTICK-1088

    Change-Id: I060580504d6969c5ba859ed4494082feb998d37d
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry pick from commit c1ab98526209a761a0565afa7ccd552ba9ac7ade)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Remove unused nova client functions." into stable/fraser
  - Remove unused nova client functions.

    Following funtions are not required by shade client also
    not been used in any of the scenario files:
    *create_aggregate
    *create_aggregate_with_host
    *create_instance
    *add_host_to_aggregate
    *create_aggregate_with_host
    *get_availability_zones
    *get_availability_zone_names
    *remove_hosts_from_aggregate
    *remove_host_from_aggregate
    *delete_aggregate
    *get_image_by_name
    *check_status

    JIRA: YARDSTICK-1088

    Change-Id: I7ba0fbce6aa3e636aa55581a993c1ec1b48fbead
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 2ca15a8c87e171cbd82b1e748dfc60903662b73b)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova delete instance with shade client." into stable/fraser
  - Replace nova delete instance with shade client.

    Function delete_instance now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: I5772a74c6dc2d103edd410042a8eaf721d1bcc5c
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 05f97c4e4ce1e8c7c97cda16f12215e663a13c23)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace nova create instance with shade client." into stable/fraser
  - Replace nova create instance with shade client.

    Remove redundant functions:
    *get_instances
    *get_instance_status
    *get_instance_by_name

    Function create_instance_and_wait_for_active now uses shade client.

    JIRA: YARDSTICK-1088

    Change-Id: I766da333dabbb1b83a7b4ede4bf73567ec70eb8c
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 069d7a13d1f8b6b465ae164e2a440c25270f7e8e)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Update neutron delete_neutron_net function." into stable/fraser
  - Update neutron delete_neutron_net function.

    Update the changes done in patch [1].

    JIRA: YARDSTICK-890

    [1] https://gerrit.opnfv.org/gerrit/#/c/52361/

    Change-Id: Iccbf16d0a2e72919d5092366241ff41686f01a58
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit 14615e286e67ca74a8c0ae55ffe043170e5ecbb6)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Replace neutron create security group full with shade." into stable/fraser
  - Replace neutron create security group full with shade.

    Function create_security_group_full now uses shade client.

    Remove openstack util's private 'get_security_groups',
    'get_security_group_id' & 'create_security_group' functions as
    'create_security_group_full' now uses 'get_security_group' &
    'create_security_group' function defined in shade client library.

    JIRA: YARDSTICK-890

    Change-Id: Ibd5b9ca9b7ce99b3e40c5dcc545f2af672ce2203
Signed-off-by: Shobhi Jain <shobhi.jain@intel.com>
    (cherry picked from commit c00e2c606806b46111b108818235d236ba409515)

Update git submodules

* Update docs/submodules/ipv6 from branch 'stable/fraser'
  - Updated Release Notes for Fraser Release 6.2.0

    Change-Id: I5f98a65b2536cc53afe34a3184df8a1f2cc6b927
Signed-off-by: Bin Hu <bh526r@att.com>
    (cherry picked from commit 43cecdcd9655ac0ec5d225095c80264eb1efb03a)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Corrected scale-up command line arguments

    Change-Id: If308fde797dcb01e58f37ad81bb116fde542366a
Signed-off-by: Chornyi, TarasX <tarasx.chornyi@intel.com>
    (cherry picked from commit 5fa31a4e78b9421615ef81c8392e30179d49e1cb)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Restrict RTD Verify and Merge jobs to Releng"
  - Restrict RTD Verify and Merge jobs to Releng

    By default the rtd jobs from global-jjb trigger against all projects.
    Setting 'project-pattern' to releng will restrict it to just the releng
    project.

    Change-Id: I9586577e8d83c6bf189eaee9159b1e49726740a5
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Functest: Restores ability to run with pre-defined creds

    This patch is needed for the case where there are provided OS
    credentials to functest, and there is no need to find the installer VM
    and copy the credentials to the host. In the Apex snapshot case, there
    is no installer VM on the slave, so we must provide the credentials
    file.

    Also includes a fix to use tempest_smoke_serial for the snapshot netvirt
    verification until CSIT suite is working correctly.

    Change-Id: Ic84955f527e3f84bb0d8579a377b4a1883fe3eb2
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Change IxNextgen library load" into stable/fraser
  - Change IxNextgen library load

    Changed IxNextgen library load in IXIA RFC2544 traffic generator call.

    JIRA: YARDSTICK-1116

    Change-Id: Icbdc5f1255dd2676584f3a1be767287e55e71f4a
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 9d84f5ad73e9689d3131e4ce09fe7262697c5817)

Update git submodules

* Update docs/submodules/functest from branch 'stable/fraser'
  - Revert "Stop rolling snaps (bypass bugfixes)"

    This reverts commit 5c6b1b4710f2a69f11a1ccb1c699f7c8c3616290.

    Change-Id: Ifcdf508f792741f947dee6c8eed1ff5dd57ab3cc
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - NSB setup inventory name changed

    NSB setup script [1] fails when retrieving the inventory file. This script
    is going to be deprecated but we still support it.

    [1] https://github.com/opnfv/yardstick/blob/master/nsb_setup.sh

    JIRA: YARDSTICK-1247

    Change-Id: I3798531652b0e3a1a007d1d9434998fdd54645d7
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
Signed-off-by: Mytnyk, Volodymyr <volodymyrx.mytnyk@intel.com>
    (cherry picked from commit 370b703896656f6b6949de05b6c44c98a72eee46)

Update git submodules

* Update docs/submodules/fuel from branch 'stable/fraser'
  - [ha] Add fabric to maas admin subnet

    Change-Id: Ida4cf736dfe60886384e7e180d3e43faf811bd58
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>
    (cherry picked from commit 75cbbc689bd9428384f4828f970981da52e92a04)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Fix nsb_setup.sh script

    Ansible role install_dependencies was renamed
    to install_dependencies_jumphost in previous patch.

    JIRA: YARDSTICK-1146

    Change-Id: Idf7c191151961c1c0e63ad2f75aa0aab8ed2b2fa
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>
    (cherry picked from commit bbf5e6a37922124bd729b5e6e50929c282bb7892)

Update git submodules

* Update docs/submodules/fuel from branch 'stable/fraser'
  - Update release notes for 6.2

    Change-Id: Ibd168ef31af1f8a9a2c128ce8a8e95a5c231a917
Signed-off-by: Cristina Pauna <cristina.pauna@enea.com>
    (cherry picked from commit ea9cf5304b649298c40155714a4374724aec1835)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Install dependencies: bare-metal, standalone" into stable/fraser
  - Install dependencies: bare-metal, standalone

    This will install all dependencies needed on the bare-metal and standalone
    physical nodes.

    JIRA: YARDSTICK-1177

    Change-Id: I719ca64d4da098d6dd60597e5fc4ad6f4715f79e
Signed-off-by: Stepan Andrushko <stepanx.andrushko@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry picked from commit 86be172a9427a4ecee5666e9660ce37c006abe1b)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Start nginx and uwsgi servicies only in not container mode" into stable/fraser
  - Start nginx and uwsgi servicies only in not container mode

    No need to execute nginx and uwsgi when running in container mode.

    JIRA: YARDSTICK-1179

    Change-Id: I253f3adab388a14886b70e6589936f6eb27ac4c0
Signed-off-by: Stepan Andrushko <stepanx.andrushko@intel.com>
    (cherry picked from commit 3decdca3d0732a1df845650562e7bcb8fbfd87a7)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Migrate install.sh script to ansible" into stable/fraser
  - Migrate install.sh script to ansible

    Ansible scripts to install yardstick.

    These scripts will take a few options:
      INSTALLATION_MODE : Container or Baremetal
      YARDSTICK_DIR: Location of Yardstick directory
      VIRTUAL_ENVIRONMENT: Should a virtual environment be used
      NSB_DIR: Location of NSB directory

    JIRA: YARDSTICK-1126

    Change-Id: I4a13e07e96650ffd971dfb18472f2563cfd51aa9
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>
    (cherry picked from commit 0b976dd02421a181674acc837127ac741ccfccea)

Update git submodules

* Update docs/submodules/storperf from branch 'stable/fraser'
  - Adds IP Addresses to Config API

    Uses the IP addresses of the VMs in the stack to populate
    a new slave_addresses field in the REST API.

    Change-Id: I363a4d118cf5c786f4faf8432ea884cb010c6db5
    JIRA: STORPERF-239
Signed-off-by: mbeierl <mark.beierl@dell.com>
    (cherry picked from commit 9014800e1b5ebcd0f3e254c03ad937b0583dd818)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fixes to allow ODL snapshot update to work

    Change-Id: I2e641434051e615cf04922a7349c7a7f1891caea
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/storperf from branch 'stable/fraser'
  - Speed up Builds

    Adding a new keyserver and ulimit to help speed up
    builds.

    Change-Id: If79ba1e533bfe2044606d98047abe9fa342aefb4
Signed-off-by: mbeierl <mark.beierl@dell.com>
    (cherry picked from commit e71013c4cb73c8ccbd01782cbd814030f4008b9b)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "[doctor] disable un-runnable jobs"
  - [doctor] disable un-runnable jobs

    This patch disbles the following jobs as the labs are not working.

     - daisy@x86_64
     - fuel@x86_64

    Change-Id: I69306ac1474afa0c8980ab4e2f1afa29abc789e0

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Refactor "utils.parse_ini_file" testing

    JIRA: YARDSTICK-1218

    Change-Id: I5136b22110d215beb7af72998ad47a8dba27f63b
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 4a186ef7fde978f89f4332990f70e396966f69e3)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Fix "os.path" mock problems during tests

    This patch removes the global mocking applied on "os.path".

    Change-Id: Ia18d2c90195c5408a1852792bdf05b6f0c1ad21f
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry picked from commit d7f8717c3beb1854976e77d56823f482497ffff3)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Update and fix netvirt artifact download

    Change-Id: I7089603b982125f90dd5259e0720007ab3f910e5
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix fluorine name and patch netvirt reinstall

    Temporarily pull in specific patch to fix ODL netvirt reinstall.

    Change-Id: Id3ba00592e81ee0970075b34afb72f76db02d0b4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Refactor RFC2455 TRex traffic profile injection" into stable/fraser
  - Refactor RFC2455 TRex traffic profile injection

    The TRex RFC2455 traffic profile configures the duration of the traffic
    injection. Once the traffic is started, the traffic profile should poll
    the traffic injector client for the injection status. When the injection
    is finished, the traffic execution should end.

    Instead of this, the traffic profile waits a fixed time (using time.sleep
    method) and then stops the traffic. This approach is not accurate and may
    cause shorter injection periods.

    JIRA: YARDSTICK-1197

    Change-Id: I5090df81ef4ec7945ff6c1aff070656b48e0fe77
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 340be73be5fd20067c23a7ddce9073639e355d3a)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Stop time.sleep mocks in unit tests

    tVpeApproxVnf and TestProxSocketHelper classes mock "time.sleep" in
    the setUp method without deleting it at the end of the test execution.

    JIRA: YARDSTICK-1243

    Change-Id: Iff31d9c7b400ad8a47f37792aeb0d20328b9d9e1
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 9b22f5b23050a0be67f8237e4d0b412f58b43472)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Fix release tagging noop"
  - Fix release tagging noop

    When the release job runs to tag the repos it should push the tags back
    to Gerrit. This was originally a 'noop' for testing.

    Change-Id: Ifbecbccda1ae123c7b8f0d59eefa727784d10acd
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Include yamllint on build servers"
  - Include yamllint on build servers

    Change-Id: Ie99da1fd5ed3789a1dbf4134796b95f2ac69abce
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Move tests: unit/network_services/helpers

    * Fix pylint errors
    * Add TODOs

    Some errors are ignored locally, as they were a symptom of other problems.
    These issues have been flagged with a TODO, and should be fixed later.

    JIRA: YARDSTICK-837
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    Change-Id: If0b77a6e0b102071ecfb212362647c62a621e4f9
    (cherry-picked from commit 065c00d3147d12c692d43179d9c1c9afadb97825)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Move tests: unit/network_services/vnf_generic" into stable/fraser
  - Move tests: unit/network_services/vnf_generic

    * Fix pylint errors
    * Add TODOs

    Some errors are ignored locally, as they were a symptom of other problems.
    These issues have been flagged with a TODO, and should be fixed later.

    JIRA: YARDSTICK-837

Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    Change-Id: I3d95537a64bde923703421510d27bac0d6dd92bd
    (cherry-picked from commit 98294f2c8153f663c3b3a4e4cb98910e9d5cb602)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Standalone XML machine type is not longer valid" into stable/fraser
  - Standalone XML machine type is not longer valid

    Current XML machine type definition [1] is not longer valid. According to
    [2], the default machine type should be "pc-i440fx-xenial".

    NOTE: StandAlone physical nodes are deployed using Ubuntu OS.

    [1]https://github.com/opnfv/yardstick/blob/master/yardstick/benchmark/contexts/standalone/model.py#L48
    [2]https://wiki.ubuntu.com/QemuKVMMigration#Upgrade_machine_type

    JIRA: YARDSTICK-1192

    Change-Id: I77b1379aaf416b1225e91af2c3ac746cb101f774
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 6414a61a988a73ee1b939e2d5de2f0afdde4319a)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Remove instantiated contexts in "test_task"" into stable/fraser
  - Remove instantiated contexts in "test_task"

    During unit testing, all contexts instantiated must be deleted at the end
    of the test to avoid clashes with other tests.

    JIRA: YARDSTICK-1209

    Change-Id: I1994b915001b4a518e096833a0c5d33febbd8de6
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 5e4d95ba299ce92588701d9481657c343b8ef609)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Add support for tox in SFC project jobs"
  - Add support for tox in SFC project jobs

    Depends-On: https://gerrit.opnfv.org/gerrit/#/c/58649/

    Change-Id: I4b39c6fd8e70fe40c68e5b2d7043ee522583290b
Signed-off-by: Dimitrios Markou <mardim@intracom-telecom.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Update ODL master DIST

    Change-Id: I5937b486777a5da50b13084969a38c5ee6cb4ba6
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fix IP overcloud parsing for snapshot

    Sometimes there are more than 1 IP per line in the overcloudrc. So we
    make sure we only grab the first one.

    Change-Id: I565fbed902f00688607683cdc69d0edcba4dc743
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: Fixes blocking/snapshot checks

    Change-Id: If6782ae3806fa9193d42bc3f640c000e3a723724
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/snaps from branch 'stable/fraser'
  - Extra changes on Flavor Config

    JIRA: SNAPS-254

    Change-Id: I4f18c0d11fe2e8456c0ebce0681f22e3e1daf6bf
Signed-off-by: Panagiotis Karalis <pkaralis@intracom-telecom.com>
     (cherry picked from commit c5fd2310c8e9f63cf607de7fa9c21f60ab877224)

  - Patch to make flavor configuration for tests more flexible.

    JIRA: SNAPS-254

    Change-Id: Ib81569df499bbf0652c2025fc7de37af92525f7f
Signed-off-by: spisarski <s.pisarski@cablelabs.com>
Signed-off-by: Panagiotis Karalis <pkaralis@intracom-telecom.com>
     (cherry picked from commit 44e8131216787127980558824b2a1def94fe317e)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Move tests: unit/network_services/nfvi" into stable/fraser
  - Move tests: unit/network_services/nfvi

    * Fix pylint errors
    * Add TODOs

    Some errors are ignored locally, as they were a symptom of other problems.
    These issues have been flagged with a TODO, and should be fixed later.

    JIRA: YARDSTICK-837
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    Change-Id: Id330ee1c89d54ef487edb7fe160e5a31d9a3094f
    (cherry-picked from commit e12f98c2bbed5191714bdc553e7b269b1437cecd)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Add "duration" parameter to test case definition" into stable/fraser
  - Add "duration" parameter to test case definition

    Add "duration" parameter to test case definition, in scenario:options
    section. This parameter will be rendered in the traffic profile.

    If the parameter is not present in the test case scenario options, the
    default time written in the traffic profile options will be 30 seconds
    (TrafficProfile.DEFAULT_DURATION = 30). If the traffic profile
    injection time is not defined, the default injection time will be 30
    seconds.

      testcase:scenario:options:duration (default = 30)
          render --> traffic_profile:duration
              parse --> TrafficProfile.duration (default = 30)

    Target traffic profiles (RFC2544):
      - RFC2544Profile
      - IXIARFC2544Profile

    JIRA: YARDSTICK-1194

    Change-Id: I968922e6bb882d7ee15aa1c4db4037face7a3492
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 1517319fd210d71db72c5e4bfa00fc49ae4fa877)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Remove print out of logger exception in TestUtils" into stable/fraser
  - Remove print out of logger exception in TestUtils

    Remove print out of logger exception while executing
    "TestUtils.test_parse_ini_file_missing_section_header" test case.

    JIRA: YARDSTICK-1225

    Change-Id: I2a4e447c5d119fb9585b477d74f3d0a002c8278e
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit 99d51230daac3452f5295b4ea39890d8920e6ca3)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Cleanup TestYardstickNSCli class" into stable/fraser
  - Cleanup TestYardstickNSCli class

    Remove the console output during the test execution. Refactor the
    "parse_arguments" test case.

    JIRA: YARDSTICK-1224

    Change-Id: I68954b986dbea70752adb121e0445e162bdfddcb
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from commit a8ddeef62ee1f9795881994380f49ce88a760102)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Document for Fraser test case results" into stable/fraser
  - Document for Fraser test case results

    JIRA: YARDSTICK-1132

    In B and C releases, Yardstick provides an overview of the results of test cases developed by Yardstick, executed on OPNFV community labs.

    This work has not been done for the D and E releases, although result analysis for Euphrates is available at (https://wiki.opnfv.org/display/yardstick/Euphrates+release+test+results+analysis). We plan to restart to provide a basic test case results analysis for Fraser and compare performance data with Euphrates.

    This JIRA ticket will be resolved into 3 commits: 1. Document for E release test case data; 2. Document for F release test case data; 3. Document for results analysis.

    Change-Id: I3c59851c8878ba37145e6ad6958272a62bad3f52
Signed-off-by: JingLu5 <lvjing5@huawei.com>
    (cherry picked from commit 3f0df920c71529024a69ad65c2bebabbcbde6022)

Update git submodules

* Update docs/submodules/snaps from branch 'stable/fraser'
  - Add flavor metadata for volume related tests

    These tests are very sensitive to the state of instance which might be
    active in terms of nova, but in fact still trying to get an ip address in
    case of dpdk scenarios.

    Change-Id: I739044c2edd360535ce1d3531549263163cfea19
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>
Signed-off-by: Panagiotis Karalis <pkaralis@intracom-telecom.com>
     (cherry picked from commit 88c9496ee5d40adbb324c0d449ed1659e661d700)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Apex: update 3rd party netvirt CI

    Intel slave no longer exists. Moves the Apex netvirt snapshots to run on
    Apex slaves.

    Change-Id: I3d9d32455e5a24cb64070677a32c5908cc331326
Signed-off-by: Tim Rozet <trozet@redhat.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Improve IXIA IxNetwork library and traffic profile (4)

    This patch implements an active wait for the traffic injection. Once the
    traffic is started, the traffic generator class will poll periodically the
    IXIA traffic generator chassis to retrieve the status of the traffic
    ("started", "stopped").

    Now the latency statistics are retrieved and reported for each injection
    period.

    JIRA: YARDSTICK-1116

    Change-Id: I4422e2c88b4fc97b7cac3de8a82b2d75467c4117
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry picked from commit a3399d07b83ce0e50d9c0144d00a7ba83a73390f)

  - Improve IXIA IxNetwork library and traffic profile (3)

    This patch modifies IP packet parameters.

    "IxNextgen.update_ip_packet" modifies the L3 packet according to the
    test case and setup the IP addresses.

    JIRA: YARDSTICK-1116

    Change-Id: I46ff75ab1989d0e6f5cc876418a015386717e06f
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry picked from commit e5c78ae3ec1bcf0cb44646c6031fb9c04dd63e4a)

  - Improve IXIA IxNetwork library and traffic profile (2)

    This patch modifies the way the packet frame and the flow is configured
    before the injection.

    "IxNextgen.update_frame" modifies the L2 frame according to the
    test case and setup the frame rate, frame size, traffic injection
    duration and MAC addresses.

    JIRA: YARDSTICK-1116

    Change-Id: Ife08f15a4eda24d7835c92c4172b450854d112ee
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry picked from commit 8d10a6a8447fc2798491a6f3856e21b85fa309ba)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Improve IXIA IxNetwork library and traffic profile (1)

    This patch introduces a new way to configure the TCL IxNetwork server.
    All the configuration is done using the TCL API, removing the need of
    using the pre-saved configuration file.

    "IxNextgen.assign_ports" creates and assigns the virtual ports for each
    physical port defined in the test case.

    "IxNextgen.create_traffic_item" creates one traffic item and two flow
    groups per pair of ports, in both directions.

    "IxNextgen.gt_statistics" retrieves only the required statistics to
    generate the samples blob in the traffic generator.

    JIRA: YARDSTICK-1116

    Change-Id: I8f1c0c55e99c274b2ed8276ed9a385c502e16d93
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    (cherry picked from commit ee721fd3e8b77ccfe4252a107a9af8dc41ccc389)

Update git submodules

* Update docs/submodules/releng from branch 'master'
  - Merge "Update the repo script to only list repos once"
  - Update the repo script to only list repos once

    When projects have multiple releases (ex 6.0, 6.1) the repos would be
    listed multiple times when only wanting repo names. This change still
    supports listing the repos when they have multiple versions.

    Change-Id: I7b0c96649b5486d91b177f95cf175bebcb53815b
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Add active wait function" into stable/fraser
  - Add active wait function

    Added function "wait_until_true". This function will make an active
    wait until the predicate passed as an argument returns True.

    If the timeout expires, the function will raise a generic exception
    or a user defined one passed as an argument.

    This function will be used in YARDSTICK-1127.

    JIRA: YARDSTICK-1128

    Change-Id: I9854e465ac6b586bf4be39ab4b266d5625b39e30
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>
    (cherry picked from 099108aab37d1fae1b27f4e2e20136c234df1a52)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Add IxNetwork API Python Binding package" into stable/fraser
  - Add IxNetwork API Python Binding package

    Add IxNetwork python package to the requirements list.

    This module is needed for the "NSPerf" scenarios using IXIA as traffic
    generator, when IxNetwork is the program used to handle the IXIA
    generator.

    The latest version of this module is 8.40.1124.9 [1]. The license type
    is MIT.

    [1] https://pypi.python.org/pypi/ixnetwork

    JIRA: YARDSTICK-1106

    Change-Id: I279933c95994f5120930256a104c4192a0b9900d
Signed-off-by: Rodolfo Alonso Hernandez <rodolfo.alonso.hernandez@intel.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Use TRex release v2.41 to support both x86 and aarch64" into stable/fraser
  - Use TRex release v2.41 to support both x86 and aarch64

    Currently Yardstick uses Cisco's TRex release v2.28 which
    can only support x86, for the consideration of
    multi-arch support of Yardstick, the trex release v2.41
    is now available and it can support multi-arch(both x86
    and aarch64) now.

    For the external lib of v2.41, for x86_64, it looks like:
    external_libs/pyzmq-14.5.0/python2/intel/ucs4/64bit/zmq
    for arm64, it looks like:
    external_libs/pyzmq-14.5.0/python2/arm/ucs4/64bit/zmq
    So replace the trex release v2.28 with v2.41.

    JIRA: YARDSTICK-1191

    Change-Id: I22dc3499283d48a89da1145cc480fd7d2a93a1cc
Signed-off-by: trevortao <trevor.tao@arm.com>
    (cherry picked from commit 13f19d35a04ffb46ca673e81385779bc46c48781)

Update git submodules

* Update docs/submodules/doctor from branch 'stable/fraser'
  - Doctor releasenotes Fraser 6.2

    Change-Id: I18625dc03f050e2d424cfcd1bd10534647db5525
Signed-off-by: Tomi Juvonen <tomi.juvonen@nokia.com>

Update git submodules

* Update docs/submodules/armband from branch 'stable/fraser'
  - [patch] Rebase latest changes

    Change-Id: I2ada30db2d076dab8895c77075255c1bac062fe2
Signed-off-by: Delia Popescu <delia.popescu@enea.com>

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Configure ACL via static file" into stable/fraser
  - Configure ACL via static file

    This patch allows user to configure ACL/vFW SampleVNF ACL
    via configuration file provided in TC definition. The
    Yardstick applies the rules to SampleVNF from specified config
    file + rules generated by Yardstick (default rules).

    The example of SampleVNF ACL CLI commands generated/applied
    by Yardstick can be found at (using default ACL config file):

    ACL VNF ACL CLI commands:
      acl/tc_heat_rfc2544_ipv4_1rule_1flow_64B_trex.yaml
      http://paste.openstack.org/show/723303/

    vFW VNF ACL CLI commands:
      vfw/tc_heat_rfc2544_ipv4_1rule_1flow_64B_trex.yaml
      http://paste.openstack.org/show/723304/

    Change-Id: I76a630261a982083b628e3985fc3bec14ca495db
Signed-off-by: Mytnyk, Volodymyr <volodymyrx.mytnyk@intel.com>
    (cherry picked from commit 3fdca97ff5053770161059a34a95fd39463eaecd)

Update git submodules

* Update docs/submodules/yardstick from branch 'stable/fraser'
  - Merge "Move tests: unit/network_services/traffic_profile" into stable/fraser
  - Move tests: unit/network_services/traffic_profile

    * Fix pylint errors
    * Add TODOs

    Some errors are ignored locally, as they were a symptom of other problems.
    These issues have been flagged with a TODO, and should be fixed later.

    JIRA: YARDSTICK-837
Signed-off-by: Emma Foley <emma.l.foley@intel.com>
    Change-Id: Id983a2e415d66633331e7fea96a377e2a7589980
    (cherry-picked from commit cfc40ad1bb36889e54bc99cb779cfcfa1f3b04dd)