[docs] Remove scenarios

For Jerma, a documentation restructure was proposed [1].
THis change removes reference to scenarios in Barometer.

[1] https://wiki.opnfv.org/display/meetings/OPNFV+TSC+Meeting+2020-10-13?preview=/63111416/63111451/OPNFV-docstructure.pdf
Change-Id: Id55e55c3a4ea824c20fcadcfc4716ff8d23cc68f

Change-Id: I135226f7ecc72ee086effede68f92ade0c85d0a2
Signed-off-by: Emma Foley <efoley@redhat.com>

Enabling dpdk_telemetry plugin

Enabling dpdk_telemetry plugin with One Click Install.
Added the config. templates and the related Documentation.

Signed-off-by: Jabir Kanhira Kadavathu <jabir.kanhira.kadavathu@intel.com>
Change-Id: Ibecd96d4102cd76a71d31613879ae57950f5108f

Upgrading dpdk version to 19.11

Upgrading dpdk version from 18.11 to 19.11
Added notes regarding backward compatability.

Signed-off-by: Jabir Kanhira Kadavathu <jabir.kanhira.kadavathu@intel.com>
Change-Id: Id95598ca92efd8c39025ea295ddf3521b138c79c

Temperorily revert "Rename collectd container to barometer-collectd-latest"

This reverts commit 59338794c8ae8ff82c00dc14ea47a9279cc213d4.
The reason for reverting is that there is not yet a container image available
on Dockerhub for barometer-collectd-latest

Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: Ia6e37af99787a6c02eb368fc7bfdd9d584716f2b

Rename collectd container to barometer-collectd-latest

Change-Id: I0dfff659b4e05e3e619ea62f1771db79f7a8f0df
Signed-off-by: Emma Foley <efoley@redhat.com>

Update collectd tags to use main instead of master

The branch names have been updated, and main has replaced
master, which will no longer be updated.

Change-Id: Idfce21554594f15a831c8b7ec769eb85d52068b1
Signed-off-by: Emma Foley <efoley@redhat.com>

Merge "Moving DPDK Verion From 16.11 to 18.11. Updated the related section in userguide. Also updated the change in kni location for 18.11."

Merge "Update SNMP agent config"

Moving DPDK Verion From 16.11 to 18.11.
Updated the related section in userguide.
Also updated the change in kni location for 18.11.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: If5f71f1803c65031b2c759052f571ce55b9ed4b6

Merge changes from topic "container_update"

* changes:
  [docs] Update Docker install guide
  Update collectd container to use 5.11

Merge "Publish a new Barometer testing container"

Update SNMP agent config

The one-click install was not working with SNMP. The manual install
also wasn't working due to the ``Instance true`` config option in
the config. ``Instance true`` is not a valid config option for snmp
agent.
This option appears in the stable container config, and also in the
ansible config, but not in the master container. Removing this
unsupported option allows the config to be read and collectd to be
started.

JIRA: BAROMETER-134
Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: If154b3190d82d1cd3638a9c258d2b48bb0efe9af

[docs] update formatting on one click install

Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: If4a5bbe119ce0a0dd0bed950f793b747e234cd61

[docs] Update Docker install guide

Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: I03b89331fa45c542339fec9dfcd035649d930679

Update collectd container to use 5.11

Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: I1867ec05011a58b16a0d88bd9bd3fdfd7ac5d2e3

[docs] Fix docs to pass rtd jobs

Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: I8351e3defe15cd699a629bc3f78ecd074f0d9dd0

Publish a new Barometer testing container

It's widely based on the former Functest features container.
As barometer seems leveraging on python2.7 and depends on Functest, it
inherits from opnfv/functest-core:hunter (latest py2 release).

pika seems missing in requirements.

INSTALLER_IP should be protected (it raises exceptions to the upper
program).

Change-Id: I50d1cf0a7a1233447245d852f79775c8e9fa8c99
Signed-off-by: Cédric Ollivier <cedric.ollivier@orange.com>

Temperarily disable SNMP in one click install

SNMP config has been causing the one click install to fail.
Disabling it temperorily so that it doesn't block Iruya release

JIRA: BAROMETER-134
Change-Id: Ia7944eb6461497c0cd17a2f7ba5b2c2018ffd2a2
Signed-off-by: Emma Foley <efoley@redhat.com>

[docs][ves] Update path for ves configs

JIRA: Barometer-133
Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: I7f427089b6e9a7c81a0bbea36b6af46bf721a042

Merge changes If3d86e80,I48763243,I656a6786

* changes:
  Relative imports fix
  Python 2 to 3 migration fixes
  Python 2 to 3 migration of collectd-ves-app

Merge "Updates/Fix on Legal/License Headers"

Relative imports fix

Change-Id: If3d86e80be8de94c01ba599bd4d83be139d9886c
Signed-off-by: Plwel Tomaszewski <pawelx.tomaszewski@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Updates/Fix on Legal/License Headers

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: Id29ba83455d2cea21ec634d3e0eee38d84de465b

Revert "Updating the DPDK Version to 18.11 (Latest Stable Release) and respective information in teh one click install userguide."

This reverts commit 4fc25349916eca67d27dbf193fc69d1d0afecf3c.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: I5ec8ff8e90a6fa5bd5f7d0eda22e0e9d28427312

Merge "Fix the Makefile for intel-cmt-cat so it can be build without errors on CentOS 7. Mount the /sys/fs/resctrl from host to container to avoid issues with intel_rdt plugin."

Merge "Add capabilities plugin (PR 3292 on collectd github) to experimental container. Update one-click install of experimental container to add capabilities plugin."

Python 2 to 3 migration fixes

Change-Id: I487632435ae575c2507e58ee5682aa03934391b8
Signed-off-by: Pawel Tomaszewski <pawelx.tomaszewski@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Python 2 to 3 migration of collectd-ves-app

Change-Id: I656a67864d821454e5ecc1ed60ce601c872da23d
Signed-off-by: Pawel Tomaszewski <pawelx.tomaszewski@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Merge "Py2 to Py3 migration updates for VES App and the Dockerfile"

Merge "Provided the correct path for schema yaml & config files to avoid issues in starting VES Application."

Fix the Makefile for intel-cmt-cat so it can be build without errors on
CentOS 7. Mount the /sys/fs/resctrl from host to container to avoid
issues with intel_rdt plugin.

Change-Id: I04d22fccb950aabbde774c1850a5b44ee57908f5
Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Add capabilities plugin (PR 3292 on collectd github) to experimental container. Update one-click install of experimental container to add capabilities plugin.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: I1753c4d8af279ad9c7de29e7a198dbd8161c516d

Py2 to Py3 migration updates for VES App and the Dockerfile

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: I2e4934518f46afb060748ab08fd2ea9bfc0271d6

Merge "Updating the DPDK Version to 18.11 (Latest Stable Release) and respective information in teh one click install userguide."

Add new PTL Emma Foley

Change-Id: Ied7f5b6423b374e7e7f89f2e199b3270c2262db4
Signed-off-by: Matthias Runge <mrunge@redhat.com>

Provided the correct path for schema yaml & config files to avoid issues in starting VES Application.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: Id02a8a601a6e98fce5f887c80baae9f1c5cec6fd

Adding a comment under 'confiure ssh keys' to make the user aware about the necessity of it.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: Ie474bab8fb3e6db6954769fc00a66d659ef66dfc

Updated committer details for Emma Foley

Updated company and e-mail.

Change-Id: I3139b5bafac8f54a215cf2ba7e8abd763108fb3f
Signed-off-by: Emma Foley <efoley@redhat.com>

Merge "Updated/corrected the path for ves application config file"

Merge "Format change to align with Influxdb_hosts"

Updating the DPDK Version to 18.11 (Latest Stable Release) and respective information in teh one click install userguide.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: Ib0b0892eed4f654068bf376d9f2b9da2e6043b74

Updated/corrected the path for ves application config file

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: Ib4243f84aaba3d7920c51e0da3fad54c960e53eb

Merge "Moving the collectd version from 5.8 to 5.10"

Merge "1. Added one dependency step for installation in Ubuntu,to match with that of in centos. 2. Updated default.inv documentation for the latest changes in the actual file in the Repository"

1. Added one dependency step for installation in Ubuntu,to match with that of in centos.
2. Updated default.inv documentation for the latest changes in the actual file in the Repository

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: I2ab5b30bf2954cf247fdb56763e90a314db9c90f

Moving the collectd version from 5.8 to 5.10

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: I1579a2bd0ef2280134fc13183ebafeb444b752f9

Format change to align with Influxdb_hosts

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: Ie368f2d32ce1291036f6fff95cd13b0dbdeced24

Added a comment under grafana_hosts to convey that Influxdb and Grafana should be same host.

Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>
Change-Id: I82732de3eacd7abda5d63059d988452e8141201b

Update ansible scripts to use py3 for Ubuntu and Fedora

Signed-off-by: Emma Foley <efoley@redhat.com>
Change-Id: Ia62933a4b824f1280a693fc8004d29c67dc5e2ac

Merge "Add a README for github mirrors to show"

Add a README for github mirrors to show

Change-Id: Ib3ae52755cae26a386b17f01dab3bba4976c220e
Signed-off-by: Matthias Runge <mrunge@redhat.com>

[docs][install] Split the docker and ansible install guides

docker.userguide.rst contained two methods of installation:

* Manual installation of all the docker containers
* one-click install using ansible

A new user is potentially going to be confused about which
document to use, and may not be aware that the two options exist.

This change splits the install guide into two documents, one for
docker, and one for ansible. It also renames the docker guide to
make it more obvious to the user what is contained in the guide.

Change-Id: I1ecdd7d15f8f53c80221916379982bca2673a06d
JIRA: BAROMETER-128
Signed-off-by: Emma Foley <efoley@redhat.com>

Updated the typo in diagrams for 3 modes of VES Operations.

Change-Id: If197bf24f8b834a81f21aa99b2d89b7b70ffad54
Signed-off-by: jabirkkclt <jabir.kanhira.kadavathu@intel.com>

Merge "ansible: add variable to select collectd container"

docker.userguide: Add info about collectd master & experimental containers

Added chapters about different collectd container flavors that
can be chosen in barometer project.

Change-Id: If6383231580749c37d2ff0ecc43f62b67434e51c
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

ansible: add variable to select collectd container

Add a variable to playbooks to select type of collectd container.
Container flavor can be stable, master or experimental.

Change-Id: Ie591ca3b7816210c377c5bffbb54117f8ee764aa
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Merge "docker: Add support for experimental collectd container"

barometer: update conf files

Updated intel_pmu.conf for ansible installation to monitor
cores 0-4 by default.
Add sample conf files for plugins supported by master container:
pcie_errors and write_prometheus.

Change-Id: Ifedff2f3b099f5d7b5a88d14909c3879d38e4e64
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

docker: Add support for experimental collectd container

Experimental container is based on master branch and includes
set of pull requests with experimental features.
By default one addtional PR is included - logparser.

Change-Id: I455122b23b6de382f6ef75a790f7b052784b59ac
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

barometer: update DMA's vendoring packages

Change-Id: I0578b094f1ecdaed20c906be2ba29d51b8089d7c
Signed-off-by: Tomofumi Hayashi <tohayash@redhat.com>

ansible: update docker userguide for collectd_ves

Change-Id: I54a2d46b8acecea6f6278f130d7567acc813c324
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

ansible: Add zookeeper to one click install

Previously 'zookeeper' docker container should be installed
manually by user - now it is a part of ansible one click install
for VES.

Change-Id: If3873cffa51ddf04d2c3769705259aaf5928cc45
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

ansible-kafka: Fix zookeeper_host_ip value

Previously 'zookeeper_host_ip' was set to 'localhost' instead
of IP address - this caused error during starting kafka container.

Change-Id: I55cf6e3375e3d08df2baf69f678aaab74f4aa408
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

Merge "Fix wrong image name in test code"

Merge "Add git installation to docker guide"

Add git installation to docker guide

Change-Id: I1e94ddaa7b877adacd874d3c2b02ea5939892dcc
Signed-off-by: Matthias Runge <mrunge@redhat.com>

Fix wrong image name in test code

This change fix the name of the container image to be tested
from the past name "LocalAgent" to the current name "DMA".
This also fix python function names, comments and log output.

Change-Id: I8bd8d1d884f6ff59c7e52da31455bc7f042ee9eb
Signed-off-by: Toshiaki Takahashi <takahashi.tsc@ncos.nec.co.jp>

Merge "Fix anteater issues of baro_tests"

ansible: install mcelog from sources on Ubuntu 18.04

On Ubuntu 18 mcelog is no longer available through apt from
standard repositories. It can be downloaded directly, and make
on target machine. Mcelog version 161 is used.

Change-Id: Ie24990869190f86efa26994081d4f887f879c867
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Fix anteater issues of baro_tests

* Use yaml.safe_load instead of yaml.load
* Not use curl
  (Use the file prepared by the procedure
   in the Functest Installation Guide)
* Not use /tmp directoriy for security reasen
* Add copyright to fix "Licence header missing"

Change-Id: Ib4ad56e6a79d7f7d00058d5bd7c6690b8c360753
Signed-off-by: Toshiaki Takahashi <takahashi.tsc@ncos.nec.co.jp>

docker.userguide: Add note about 'python' dependency in multi node setup

Ansible needs python2 to be able to finish discovery on remote host
and on some distributions it may not be installed by default.

Added note about this dependency - 'python' package has to be
installed on each node in multi-node-setup.

Change-Id: I2741325a7b4b1b38bdfb1af427c65eeb90408aa6
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

Update docker userguide: dpdk plugins

Add dpdk plugins to description of ansible installation.

Change-Id: I89e8ec6c0918455dd4df5d086fbc2475200054ce
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

Merge "docker.userguide: Fix instruction for installing ansible"

Merge "docker.userguide: Fix ansible-playbook instruction for non-root user"

Merge "Add support for dpdk events and stat to ansible installation"

docker.userguide: Fix instruction for installing ansible

Previous version of instruction for installing ansible under
pip was problematic when called as a regular user because
pip was trying to use wrong(local home) directory for caching.
It may cause problems when home directory is located on NFS.

Change-Id: Ia9eb15d1be0db0cb5aa5f3fd04a7a166ff1046b2
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

docker.userguide: Fix ansible-playbook instruction for non-root user

Now using 'sudo -H' instead raw sudo - without that option ansible
on some systems(e.g. Ubuntu 16.04) will try to use regular user home
directory for caching (it may be not accessible when home is
mounted using Network File System)

Change-Id: I9d7e14613d7e27f86c43926c05b368972527e072
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

docker.userguide: Add chapter about cleanup influxdb/grafana

Added chapter about cleaning influxdb and grafana configurations.
Config files for both are stored in folders that are shared
between container and Host machine - it is good to remove them
when removing barometer docker containers in case of re-installation
or changing active setup.

Change-Id: If84c0f0ee91560275b4834bc98dbdff518a059a8
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

Add support for dpdk events and stat to ansible installation

Add dpdk plugins to ansible installation with default
configuration.

Change-Id: I1f7949962aff5119141b5712bb6b32db8f45b287
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

docker.userguide: Add info about using influxdb in multi-node setup

Added chapter about steps that have to be performed in order to
run collect and influxdb on separate Hosts (manual setup)

Change-Id: Ia4b1234aa1346afdc27ec5eabb795dfac06f0522
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

Merge "barometer-collectd: Add support for DPDK in container"

Merge "docker.userguide: Add --network=host option for manual docker build examples"

barometer-collectd: Add support for DPDK in container

Build dpdk plugins in collectd container.

Change-Id: Ifdca827a419d6d3d4d9c6070d3a581372df8a2f9
Signed-off-by: Kamil Wiatrowski <kamilx.wiatrowski@intel.com>

default.inv: Add note about problems with mixing hostnames/IP addresses

Added a note about risks with mixing IP addresses and hostnames
in inventory file.
If the same host will be called in inventory file using both its
hostname and IP address then problems may occur during step
where dependencies are installed (ansible thinks that there
are 2 independent hosts and will try install dependencies
for both of them in the same time - it may fail be because
of apt/yum synchronization locks).

Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>
Change-Id: I2cd1ea293fadfb12f78c03028cafec993dadbe2d

Merge "docker.userguide: Fix instruction for copying ssh keys"

Merge "Committers please vote +2/-2 for PTL nomination of Matthias Runge fixed INFO"

Committers please vote +2/-2 for PTL nomination of Matthias Runge
fixed INFO

Change-Id: I5368b2bd519376212af8719a58ac325b38b8c235
Signed-off-by: Aaron Smith <aasmith@redhat.com>

docker.userguide: Add --network=host option for manual docker build examples

On Ubuntu hosts (16.04 & 18.04) there might be problem to build
docker collectd container if host is behind a proxy even if
proxy variables are set correctly - when using "--network=host"
option problem is resolved.
This option has no negative impact on other host systems so adding
it to default command line build example.

Change-Id: I69ebd13f1e05658d8ad18e3ec379f515312e7b74
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

docker.userguide: Fix instruction for copying ssh keys

Previously 'ssh-copy-id' command tried to upload key from
non-root user directory and next command was expecting that
root key was copied (in that case ansible was unable to log
into host machine)

Change-Id: Iba25e6a8da0e5902883e5aa876f735e8f632d3b9
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

Fix DMA docker image url in docker userguide

JIRA: BAROMETER-118

This fix DMA docker image url from opnfv/barometer-localagent
to opnfv/barometer-dma

Change-Id: Ia11f388f31129b0636407e1af5139c747a861b87
Signed-off-by: Yuki Kasuya <yu-kasuya@kddilabs.jp>

Merge "docker.userguide: Add a note about bar-collectd run without DPDK/RDT"

Merge "Add support for multi influx hosts"

Merge "Add 'prometheus_hosts' example definition to default.inv"

Merge "docker.userguide: Fix manual grafana and influxdb run commands"

Merge "src, docker: Change pkg import path of DMA"

Merge "docker.userguide: Remove 'docker-compose' chapter"

Merge "docker.userguide: Add link to VES collector setup instructions"

Add 'prometheus_hosts' example definition to default.inv

Change-Id: Ibd87a721ba299f02db22723cb663c4ed513cd1fb
Signed-off-by: Radoslaw Jablonski <radoslawx.jablonski@intel.com>

src, docker: Change pkg import path of DMA

Different repository from OPNFV repository was temporary used
as our own go package paths of DMA.
Since the DMA code was merged in OPNFV Barometer,
we change the import path to the Barometer repository
and we simplify Dockerfile.

Change-Id: I49aba163d3bd93a9edb48ce10bd4f69a43c2e28a
Signed-off-by: Toshiaki Takahashi <takahashi.tsc@ncos.nec.co.jp>

Add support for multi influx hosts

Added support for multiple influx hosts.
Fix issue where ansible crashes when influx_host is not defined

Change-Id: I348e53c9b6147b0fafffdebcd80037acb72d67ce
Signed-off-by: John O Loughlin <john.oloughlin@intel.com>