docs: Updating Compass4nfv installer support in Fraser

Updates the following doc with barometer-collectd container support
as well as Grafana and InfluxDB support in Compass4nfv installer:

  docs/release/configguide/postinstall.rst

Change-Id: Id2c7e1167b0fd99f9200510de7caaa7b25052a5f
Signed-off-by: Ramamani Yeleswarapu <ramamani.yeleswarapu@intel.com>
(cherry picked from commit 8b4afb2cd35bf1a32cea635b07c2fce18397413e)

Merge "[functest] Update kernel version check for mcelog"

Merge "Fix docs for container deployment"

Fix docs for container deployment

Change-Id: I4a610d8686d758913d73ca684db41616daf391bd
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>

[functest] Update kernel version check for mcelog

Change-Id: I926d0d03781a98e3509d7f9c4f4eaffc1320919b
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Merge "[functest] Skip RDT tests if on a virtual node"

Merge "[functest] Update tests for Aodh"

[functest] Skip RDT tests if on a virtual node

* Skip RDT tests if the node is virtual.
  * Push fake positive results to try avoid failure

TODO: Get the test passing.
Currently, the individual tests show a pass, however, the overall test shows a failure.

Change-Id: Iedfb125a15ed1b9d41a3d48148a4ac363a89b90b
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

[functest] Update tests for Aodh

* Update the check for timestamp to use state_timestamp instead
  state_timestamp indicates the last change in state of the alarm,
  timestamp is the last update to the alarm settings. This is not
  what we're looking for with aodh tests, so check the state update
  instead.
* Trigger an alarm state change before checking whether the alram
  was updated. Notification in collectd aren't necessarily updated
  at a regular interval, so we have to do some action and check whether
  the alarm is updated.

JIRA: BAROMETER-91
Change-Id: I26d9bb1ec7e50e07053e69068d241e4c4cbc30dc
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Merge "ansible: add task to copy custom types.db file to targets"

Merge "[userguide] Update post install verification for Apex"

Merge "[conf] Update the ovs_events config for Apex"

Merge "Update functest to fix failing tests"

ansible: add task to copy custom types.db file to targets

Change-Id: I0ae30a46d11d53cdc218e38d0b3a852aa5be147d
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

[conf] Update the ovs_events config for Apex

The SendNotification option in ovs_events is set to
false in Apex templates. This means that no notifications
will be emitted on link status change.

This patch updates ovs_events.conf.erb to match the
config in the samples folder, adn the ones used by
the reference container

Change-Id: Ia034b81aedc67c2ced51cbf831baca176218d7d3
JIRA: BAROMETER-91
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Merge "ansible: break task to copy additional config files to own file"

[userguide] Update post install verification for Apex

Since the addition of DEFAULT_ARCHIVE_POLICY to
collectd-openstack, and support in Apex, the archive
policy used by Gnocchi for Barometer metrics is set
to "high" by default. This removes the need to update
the archive policy by hand for verification.

Change-Id: I074b4cad4926bd0e59ca04f915865ed52d0b6979
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

ansible: break task to copy additional config files to own file

Change-Id: Iffba385bd8e565459288f95eadf8a52bb6cc0084
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

ansible:Put plugins in alphabetical order and fix swap plugin config path

Change-Id: Ie146e0ac9ad5e8bc1721b51e4e5112db51462854
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

Update functest to fix failing tests

* MCE log plugin was failing becaue it wasn't enables
  * Updated a check for kernel version to match Fraser
    compute nodes on Apex
* RDT was failing when virtual compute nodes were used
  * Add check to detect whether compute node is a VM
  * Skip RDT when running in a VM
* Gnocchi metrics were failing
  * increase the wait time between checking metrics
* CSV checks were failing on Hugepages
  * functest was assuming that tests were running on
    a system with at least two NUMA nodes
  * Only check for metrics on node0 of the system
* Report was showing FAIL even if a test was not executed
  * Update the report output to show SKIP instead

JIRA: BAROMETER-91
Change-Id: I4f70fc84fce80054a7aca2116357b0233f355f70
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Update collectd-gnocchi conf for DEFAULT_ARCHIVE_POLICY

* Configure the DEFAULT_ARCHIVE_POLICY option.
* This will set the default archive policy to "high".

Change-Id: I6dd88da0dc0eec96c1c472ae97c0db2395a3fb0e
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Clean up barometer-collectd Dockerfile

By merging several of the RUN lines and executing a yum cleanup all
at the end of the dependency installation, the resulting container
image will be around 300MB smaller.

Change-Id: I63139a5283ea40ec8ea5cc3fd7aa7faddc90f3ce
Signed-off-by: Leif Madsen <lmadsen@redhat.com>

Fixing the if/else logic in baro_tests/ mcelog_install()

Follow on to the change #52775
Fixed the if/else logic while installing the mcelog. And
added log messages to show on which node, mcelog is installed.

Change-Id: If5f61b1a780abd243516699e352a55baf0db96f7
Signed-off-by: Sharada Shiddibhavi <sharada.shiddibhavi@intel.com>

Merge "Auto Generated INFO.yaml file"

Merge "Switch from openstack.creds to the new env_file"

Merge "Switch to Xtesting"

ansible: add checks to ensure all ipmi dependancies are met

Change-Id: I342016af10a1ed3a11364bda7bd7a563882fafbd
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

Merge "ansible: add functionality to copy custom config files to target node"

ansible: add functionality to copy custom config files to target node

Change-Id: I6e7cb3e0923495e236b74444b1da3f4450122d02
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

Switch from openstack.creds to the new env_file

This file was renamed to avoid linking Kubernetes testcases to
OpenStack credentials.

This patch is mandatory for gating.

Change-Id: I6b4e7e83d6dfc8cf1d60bf016ef258a273156ffe
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Switch to Xtesting

It inherits from xtesting.core.feature [1].

[1] http://xtesting.readthedocs.io/en/latest/apidoc/xtesting.core.feature.html

Change-Id: Ib547aa60d9b8bf61ab5433496d7149a43355d08c
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

ansible: add roles to launch ves and kafka containers

Change-Id: Ida03c47bbe94600b034c95bd0d795e62c253303c
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

Merge "docker: add Dockerfile for barometer-snmp"

Merge "ansible: add roles to launch collectd, influxdb and grafana containers"

ansible: add roles to launch collectd, influxdb and grafana containers

Change-Id: I330172a2165e51a1557f084fd85fce12dfaad3a7
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

Merge "Fix syntax error in baro_test/collectd.py:mcelog_install"

Revert "Merge conflict"

This reverts commit 7f4ef61d68c3ed96759f3553b2793e0ce6a7e4a5.

Change-Id: I0ac115a5e6dfbc53051ed7ee6ae0ceb72a8128af
Signed-off-by: TsaLaGi <aasmith@redhat.com>

Fix syntax error in baro_test/collectd.py:mcelog_install

The version of CentOS that's used no longer matches the version that
is explicitly checked in collectd.py:mcelog_install.

As a result the code on L637-L642[1] is now being called.
This code was syntactically incorrect, however, was previously not being
called, witht eh update to the version, it is now being executed and
causing failures in deployment [2].

[1] https://github.com/opnfv/barometer/blob/c10400426df872be3236677dcb749c755f4a559c/baro_tests/collectd.py#L637-L642
[2] https://build.opnfv.org/ci/job/functest-apex-baremetal-daily-master/809/consoleText

Change-Id: I35274d4ede17510c3ae03c756eda7bc9f78b4e17
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Merge conflict

Revert "Merge "ansible: add ansible scripts to configure .conf file on collectd nodes""

This reverts commit 7effd9e1e84dd7fa2a189a0815b5be1c0fcb165a, reversing
changes made to b26034d05aa81f624e9bcee2c8e82a1cacfe44c4.

Change-Id: I6f77b4432bbe0de29db3e099263e461e3043b22e
Signed-off-by: TsaLaGi <aasmith@redhat.com>

Merge "ansible: add ansible scripts to configure .conf file on collectd nodes"

ansible: add ansible scripts to configure .conf file on collectd nodes

Change-Id: I7349582f7412088f4d303ca52eabf40afea3f5fe
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: add Dockerfile for barometer-snmp

Change-Id: I0e53dc5c9889c3f503ab4459aae8143243959c17
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

Update mcelog.conf.erb template

The <Memory> tag is required for MCELog.
This was not updated in the puppet templates used by Apex.

Co-Authored-By: Aaron Smith <aasmith@redhat.com>
Co-Authored-By: Gordon Kelly <gordon.kelly@intel.com>
Change-Id: I6b0793b33099ef448316b9abcd4f0293d7518e29
Signed-off-by: Emma Foley <emma.l.foley@intel.com>

Merge "docs: update userguide with zookeeper instance tags and fix typos"

Merge "docker: add command to run run_collectd script on bring up"

docs: update userguide with zookeeper instance tags and fix typos

Change-Id: I916f6e9388a7ac25ff0b5631ec49fa25157c909f
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

compose: modify zookeeper tag and add container names

Change-Id: I676940bb0d5c7d9e181d27b15130e6ec4a4ececd
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

docker: add command to run run_collectd script on bring up

Change-Id: I509ee90f29115171e65b77dbba3081ae69aa0c8c
Signed-off-by: Gordon Kelly <gordon.kelly@intel.com>

docs: update PMU documentation

Change-Id: Ib6256df8a7911aa43d86026d6c40d99ba98c971a
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Auto Generated INFO.yaml file

INFO.yaml meant to be machine readable.
This file was auto generated from an ldap lookup
and your projects INFO file.

Meeting times are not currently filled out.
please ammend this patchset to complete

Going forward comitter promotions should be done
against this file.

PTLs:
Must be merged for you to gain delete access on
testresults.opnfv.org

Change-Id: Ia3bd90b129b0691f1d6b51e3daec66966d0f3d15
Signed-off-by: agardner <agardner@linuxfoundation.org>

docs: update docker userguide with steps for VES and Kafka docker images

Change-Id: I1b5a5112afe6771c5f31c56ffc856aef3450fec6
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

Merge "ci: build 5.8.0 packages for Apex"

ci: build 5.8.0 packages for Apex

Change-Id: Iee1ed3e9a1d7b744a0fb94a8d031588db2b2dea2
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docs: update docker userguide for running docker compose files

Change-Id: Ib41d6d475506ff3920bb914aeebf9dca4070fa8c
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: add docker-compose files for running barometer-images

Change-Id: Ia02aa8d64ecb0306e0611d2dc76594bee86b0f43
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: update ves image to load yaml and config files

Update ves image to load yaml and config files from /opt/ves/ directory
and rename host yaml file.

Change-Id: I3caf51150d10db08b8ef1c20a53c320b27a6acb8
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

Merge "docker: barometer-collectd openstack plugin deps"

docker: updated grafana image to continue to send API request to grafana

Updated grafana image to continue to send API request to grafana server
at 1 sec intervals at start time until grafana server is up and listening
on port. Dashboards folder has been moved to /opt/grafana/dashboards.
Documentation updated accordingly for all changes

Change-Id: I748b05372f0aa0890d3befa5645834fb217db784
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: barometer-collectd openstack plugin deps

Update the the barometer-collectd container to install the python dependencies
for the openstack plugins.

Change-Id: If8ba14066aff5f0257a400ece642a8d478600c77
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Merge "ves: move yaml and configuration files in to folders within the ves_app folder"

Merge "docker: ves update paths + rename dir"

ves: move yaml and configuration files in to folders within the ves_app folder

Change-Id: Ia8a51163890538fee774b2733d27dc2e997906cd
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

Merge "docker: influxdb add collectd database"

docker: ves update paths + rename dir

Update the paths in the Dockerfile to copy the bash startup script to
the correct location. Rename the ves directory to barometer-ves.

Change-Id: I13705a6c50d4487581e2ac7a4d0d2f6032db6415
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docker: influxdb add collectd database

Change-Id: Ie417439b4fd6f0793925a20d95824c82af4eca7a
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docker: rename barometer image and update documentation

Rename the barometer image from barometer to barometer-collectd to
align with naming convention of other barometer images and move relevant
files to new barometer-collectd directory.Docker userguide also updated accordingly

Change-Id: Id866baf41bc38d3db8575ee00abfc64e97c7259b
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

Merge "docker: add openstack plugins to barometer"

Merge "docs: update ves documentation and add steps to run on baremetal nodes"

Merge "docker: rename grafana directory"

docker: add ves application container to barometer plus appropiate yaml file

Change-Id: Ia6fd4797e28cae64af40c4e3395a51588fd2aab3
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docs: update ves documentation and add steps to run on baremetal nodes

Change-Id: I0dad9b8eee5b9cfcce8999d6ffe66fb32e9a382c
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: rename grafana directory

Rename the grafana directory to barometer-grafana and remove references to
docker compose from the documentation till we have a new barometer docker
compose file.

Change-Id: I4f64a6c10a146a39549380bb33837ae7c39cac2a
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docker: add openstack plugins to barometer

Add the openstack plugins to the barometer docker. This just clones the source
to make sure it's available in the container. Configuration is up to the end
user.

Change-Id: Iaa62be8363f95b69c76d64bed49f1453597e123b
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docs: update docker userguide to use grafana and influxdb images from barometer

Change-Id: I75b7fab6c6c40c1ba9737abce5929a77fa0c4939
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: cleanup directories and files

Rename docker container directories to contain the barometer_ prefix to
prevent any naming clashes with other opnfv containers. Cleanup files
that are no longer needed. The patch cleans up trailing whitespace.

Change-Id: I332626554502a3e17685a2abd98c0679f30d0c24
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docker: remove zookeeper from kafka docker

Remove zookeeper from kafka docker and add ability to specify kafka
broker id and address of zookeeper host.

Change-Id: Ib6f46cf326999dcd1440dc06ab5cf6665ec578ad
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker_grafana: add dashboards to docker and move dashboards from docker/ to docker/grafana

Change-Id: I8bfb3c9aa11f89b987e7cf20dd3ce7904cb3f8b8
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docker: add barometer/grafana grafana

Change-Id: I6352b908ee1fc0819e19f786d73897fd6db841e6
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

Merge "docker: add kafka container for barometer"

docker: add kafka container for barometer

Change-Id: I9e229ff08740e1d098b5e11cc61dde874ee55e02
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

Merge "docker: adding influxdb container for barometer"

docker: adding influxdb container for barometer

Change-Id: Iaaa5d5fad2b0d38bbc235a8382fd5badd58b3e65
Signed-off-by: gordonkelly <gordon.kelly@intel.com>

docs: update release notes for 5.1.0

Change-Id: If768473582497d8a9f2d7b13e1e46c65bb25eb29
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docs: Update post install instructions.

Change-Id: I4a56b38404468363b2d58bb621999a5b5fb22f09
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docs: Adding Compass4nfv installer support details

The following two files have been updated with info on
deploying Barometer with Compass4nfv installer:

  docs/release/configguide/featureconfig.rst
  docs/release/configguide/postinstall.rst

Change-Id: I99364b2e08afeee51407020149677c249ed75484
Signed-off-by: Ramamani Yeleswarapu <ramamani.yeleswarapu@intel.com>

docs: update docker documentation for dockerhub

Change-Id: Id84a2645116bc1799b89579ab1d11d44760144c4
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

VES: Updated CentOS install steps (part 2)

Change-Id: I3734518709d605e9480f0dca94db4ba7fea037f4
Signed-off-by: Mytnyk, Volodymyr <volodymyrx.mytnyk@intel.com>

VES: Updated Ubuntu/CentOS install steps

- Updated Kafka URL

Change-Id: I3ffe96d5cf4a8c2f4e5c14d81c0ee52a25103caf
Signed-off-by: Mytnyk, Volodymyr <volodymyrx.mytnyk@intel.com>

docs: update build command for docker

Change-Id: Id3a5583170f480368e6e7819ca72d6f2c2d1656d
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Merge "dockerfile: update for OPNFV docker build"

dockerfile: update for OPNFV docker build

The opnfv docker build runs in the docker directory not the barometer directory
so it doesn't have access to the top level barometer directories that it needs
to build the barometer image. This commit modifies the Dockerfile to clone the
barometer repo inside the container image.

Change-Id: I3518f4a64e806f69b424d24620fb13a9d45e4335
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Merge "VES YAML: Add node VES message definition"

ci: fix RDT missing package in nightly build

Change-Id: I0c3d750b798a210cade2cffc73da4620843b6932
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

src: hugepages configuration bugfix

Change-Id: Ia3e747b29bf5b00e135ec15c6134d827d4562c47
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

docker: add kafka support to collectd

Adds kafka support to collectd, cleaned up configuration files and updates
documentation.

Change-Id: Ie66ed22e8904e08e59aa7047d6afc9d176f3fb02
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Merge "puppet-barometer: add puppet module to barometer"

Merge "Added snmpd container"

docker: update grafana dashboards

Add grafana dashboard json files to import to grafana.

Change-Id: Ib78b82029d68199e1611f3c94e265741d730c676
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>

Updated from global requirements

Change-Id: I948ca4fdd98755630de06ea0b32a759a79c1795c
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

docs: add security information

Change-Id: I014ee8bb762e1c2d9a94bc780816508133e2adf5
Signed-off-by: Maryam Tahhan <maryam.tahhan@intel.com>
Signed-off-by: Emma Foley <emma.l.foley@intel.com>