test_spec: Clarify LTD.Throughput.RFC2544.Soak 90/690/3
authorBilly O'Mahony <billy.o.mahony@intel.com>
Fri, 29 May 2015 10:17:59 +0000 (11:17 +0100)
committerBilly O'Mahony <billy.o.mahony@intel.com>
Wed, 24 Jun 2015 12:20:44 +0000 (13:20 +0100)
Based on comments from weekly VSPERF call 2015-05-20.
JIRA: VSPERF-2

Change-Id: Ic36b6c1260168a7bb0b003585b3abe64a2841820
Signed-off-by: Billy O'Mahony<billy.o.mahony@intel.com>
Reviewed-by: Al Morton <acmorton@att.com>
Reviewed-by: Maryam Tahhan <maryam.tahhan@intel.com>
test_spec/vswitchperf_ltd.md

index 7fbd2cc..b6a6676 100644 (file)
@@ -629,7 +629,7 @@ The following represents possible deployments which can help to determine the pe
 
   **Description**:
 
-  The aim of this test is to understand the Throughput stability over an extended test duration in order to uncover any outliers. To allow for an extended test duration, the test should ideally run for 24 hours or, if this is not possible, for at least 6 hour. For this test, each frame size must be sent at the highest Throughput with X% packet loss, as determined in the prerequisite test. The default loss percentages to be tested are:
+  The aim of this test is to understand the Throughput stability over an extended test duration in order to uncover any outliers. To allow for an extended test duration, the test should ideally run for 24 hours or, if this is not possible, for at least 6 hours. For this test, each frame size must be sent at the highest Throughput with X% packet loss, as determined in the prerequisite test. The default loss percentages to be tested are:
     - X = 0%
     - X = 10^-7%
 
@@ -642,8 +642,7 @@ The following represents possible deployments which can help to determine the pe
   The following are the metrics collected for this test:
 
    - Throughput stability of the DUT.
-   - Any outliers in the Throughput stability.
-   - Any unexpected variation in Throughput stability.
+     - This means reporting the number of packets lost per time interval and reporting any time intervals with packet loss. An interval of 60s is suggested.
    - CPU and memory utilization may also be collected as part of this test, to determine the vSwitch's performance footprint on the system.
    - The [RFC5481] PDV form of delay variation on the traffic flow, using the 99th percentile.