Merge "[fuel] cleanup: Drop infra_compute_*_address" into stable/euphrates

Merge "[fuel] Use PXE interface index from net_config" into stable/euphrates

Merge "generate_config.py: Fix running without eyaml" into stable/euphrates

generate_config.py: Fix running without eyaml

If eyaml is not installed or misconfigured, we should output raw
encrypted data and throw a warn/error accordingly, instead of
bailing out completely.

Needed for Fuel deploys on PODs that do not use PDF encryption, e.g.
lf-pod2.

Change-Id: I2905df11a3cf2f2eb1ab9bfd8bd88619af2cab04
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 2db1004f456f4ed956246bc85049a69b39e8cab2)

Update eyaml README

On CentOS7 systems the gem command is contained in the 'rubygems'
package, not 'ruby-gems'.

After the keys have been moved, there is not reason to keep around the
'keys' directory.

Change-Id: I5cb9f474276de75b650ddf323a279e139fb62d37
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>
(cherry picked from commit cef924d0f6a1a8df8ad4d61b425e2a0b29e25027)

[fuel] Use PXE interface index from net_config

Instead of assuming the PXE network interface is always the first,
read its index from 'net_config' section.

Change-Id: I0b4e9fc89297f4bd718a2e5336746917347c89e1
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 30ce269378cefdd14377c838687c4052d8c7e55d)

[fuel] cleanup: Drop infra_compute_*_address

Our PDF installer adapter defines 3 unused reclass params that are
misleading, so drop them (infra_compute_node{01,02,03}_address).

Change-Id: Iedf68bbfa77f3a42572dde30275318c8d04f5eb4
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 525c0041e84db5798854b116b7786cc79d4594be)

Merge "generate_config: Use eyaml to decrypt secret values" into stable/euphrates

Merge "[fuel] Add IDF mappings to installer adapter" into stable/euphrates

[fuel] Add IDF mappings to installer adapter

Change-Id: I3a82ed747d2671510a25e65388c7f73ec760afc3
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit c59931889db99c4fe6fc308123e2085625c18c42)

[fuel] Add MaaS PXE network to installer adapter

JIRA: FUEL-313

Change-Id: I046ea732e1047f793f1b3bc6f7fc31cfcee9ff40
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 5aae093570a37ea91b8c11fa8e116deb1773abc2)

generate_config: Use eyaml to decrypt secret values

Note: IDF data encryption is not supported. Supporting that is
trivial, but it leads to slightly more complicated code, plus it
breaks support for multiline scalar encrypted data in the PDF ('>'),
forcing us to define each encrypted value as inline string.

While at it, fix silly limitation of jinja2 path residing in a subdir
of CWD.

Change-Id: I441ec754d8b6e4aad2ed73aba0b9b18ed65f05f4
Signed-off-by: agardner <agardner@linuxfoundation.org>
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit d2307b5afbf13644bfe6722018ef1975e92680d1)

Merge "Updated fuel adapter (ODL)" into stable/euphrates

Merge "[fuel] IPMI: Trim netmask from IP passed to MaaS" into stable/euphrates

Merge "[fuel] Assign public network to proxy nodes" into stable/euphrates

Merge "PDF: generate_config: Add IDF parsing support" into stable/euphrates

[fuel] IPMI: Trim netmask from IP passed to MaaS

Change-Id: I683788846a716f1af6ae8aa3b25cc3a866ae0045
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 845813111aba4c28af1acca32dc4b4f1b0640c19)

[fuel] Assign public network to proxy nodes

Change-Id: I8d4cc9505eb1d405b8f6a3ef1053249d803bda7b
Signed-off-by: Michael Polenchuk <mpolenchuk@mirantis.com>
(cherry picked from commit af9e2a904ad7f1e44ba26cf9cebbc8bb3f7d8842)

PDF: generate_config: Add IDF parsing support

For a given 'podN.yaml' file, check whether a file named
'idf-podN.yaml' exists in the same directory, and if it does,
pass its contents under the 'idf' dict key to the j2 template.

This assumes the contents of IDF yaml have a root 'idf' key.

Change-Id: I6c6f1b9f28c38989f8a6ed4a389c9a1da423d76d
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit e5c76e735a99395ab075f95c0f4105f8727a834e)

Updated fuel adapter (vlan1000, interfaces format)

Change-Id: I848f13acca08c4c8a24eeecd3554ea6d50bbb565
Signed-off-by: Guillermo Herrero <guillermo.herrero@enea.com>
(cherry picked from commit 908dab58edbbe8f22db14a9261693a54e9b2d8fd)

Updated fuel adapter (ODL)

Change-Id: I4ff233460bb4fbd88277f2798f5f6380ff3b367d
Signed-off-by: Guillermo Herrero <guillermo.herrero@enea.com>
(cherry picked from commit eeb38b5a9e900d2e0e1e52276f6b2e533eee4b1c)

Add fuel installer adapter

v3 -> v4:
- extract common variable refs, fold some reusable code;
- provide dummy defaults for PDFs without net_config;
- keep yamllint happy about spaces and empty lines;

v4 -> v5:
- more folding, define a macro for multiple IP address definition;

v5 -> v6:
- added MaaS network / DHCP range support;

v6 -> v7:
- removed macro, template code reverted to output style

JIRA: FUEL-275

Change-Id: Ib1cc319534d06c088b1db16a43aef663a8ada0d8
Signed-off-by: Guillermo Herrero <guillermo.herrero@enea.com>
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 25b2adb887b5e1cab767023476dd0ec2f02b4b59)

Merge "config/pod1.yaml: Typo fixes, add 3 new nodes" into stable/euphrates

Merge "config/installers: Add PDF installer adapters" into stable/euphrates

Merge "config/utils: Add generate_config.py" into stable/euphrates

Add Version Field to PDF

With Euphrates being the initial 'release' of the PDF it is important we
include a version specifier.

Without a version specifier, PDF consumers (computers or humans)
won't know which fields are be available, nor their possible type
(string, int, list, etc).

This also allows the PDF spec to be modified without fear of breaking
any tooling relying on the layout of fields or extance of specific
properties; Presuming tooling handles the version specifier.

Change-Id: I304ecc9ebfa0a36d40db8ef3486a3600ae86422e
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

config/pod1.yaml: Typo fixes, add 3 new nodes

In order to be able to check the PDF template against the current
installer adapters, we need to fill in all 5 nodes info.

While at it, perform some cleanup:
- s/remoteparas/remote_paramsg/ (installers use this directly ...);
- s/remote_mangement/remote_management/g;
- s/pod owner/pod_owner/;
- minor typo fixes;
- fixed one IP overlap between 2 existing nodes;

NOTE: Data for the 3 new nodes is bogus (random MACs, addresses).

Change-Id: I63c6318659678771c34e139dd1db630c6b81b214
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 783a439ec2bd23ad969ffe7a3c6b7277f7a565c7)

config/installers: Add PDF installer adapters

Previously, PDF installer adapters resided in securedlab git repo, but
since we want to be able to use it in both securedlab (for validation
of new PDF files during verify jobs) and installer projects (for
actually parsing the PDF file into usable installer inputs), we
decided to move them to a common location, also available for regular
users.

This change merely replicates the current adapter files from securedlab
git repo for the following projects:
- apex;
- compass4nfv;
- daisy;
- joid;

Change-Id: Ic4bd75e1b2dc339c15cd4943dfc5a1c74c68b094
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 1a1c03d865c55872d5912ac60ce4a1af5e814de2)

config/utils: Add generate_config.py

Previously, generate_config.py resided in securedlab git repo, but
since we want to be able to use it in both securedlab (for validation
of new PDF files during verify jobs) and installer projects (for
actually parsing the PDF file into usable installer inputs), we
decided to move it to a common location, also available for regular
users.

This change merely replicates the file from securedlab git repo.

Change-Id: I9ff7889e408338d3911853fe01b752b013de1db7
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>
(cherry picked from commit 74cdf3ea93fb3a91ed03924fdb17076d36fc4cb9)

minor changes

missing comments in https://gerrit.opnfv.org/gerrit/#/c/41711/

Change-Id: I718a2c5b06a38700f739fe23e36f535562c2a90d
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Merge "Update requirements from ARM community"

Merge "Update contents in E release"

Update requirements from ARM community

Change-Id: Id221ade872bb7f38f406a2fb8ebc8651260b22bf
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Update contents in E release

correct some information like: links and descriptions
delete unuseful information

JIRA: PHAROS-311

Change-Id: I1fceaa13fbff540bcd3f314f4653c7cc8c485091
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Add PDF to document

Change-Id: Ib3d9f89b4556d91c2d7207eb109e18eafe6dfbd6
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Merge "Fix Booking API"

restruct documents according to opnfvdocs

Use only development and release for we don't have test codes for now.

JIRA: PHAROS-311

Change-Id: Iacfcaba81a7a52e09cf999b8603cc9dc2f8f2b97
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Fix Booking API

This fixes a server error for the booking REST api and some html errors.

Change-Id: I86475967bbc8cd4c8f82f62e03789f1c9752d446
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Mount PostgreSQL Data from Persistent Volume

Each time the postgresql container is torn down the database is lost.
By using a presistent volume managed outside of docker compose, the
postgresql data can persist across updates and service restarts.

The volume needs to exist before the postgres container can start: this
is done with the 'make data' command.

Note: postgres container creates a volume at /var/lib/postgresql/data.
Mounting at this location ensures the data is persisted into the
external volume.

Change-Id: I958ba57fc735c594378d575bc7108bee0d30c1e3
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Adding Labels"

Fix Yamllint Violations

JIRA: PHAROS-298

Change-Id: I1c9afc9bfee4a60144b95bc38e2333260c95167a
Signed-off-by: Trevor Bramwell <tbramwell@linuxfoundation.org>

Merge "Fix ipmi section to be valid yaml"

Fix ipmi section to be valid yaml

Change-Id: I04b5c5ead3b71c06549e9b385dcadacb79751ee4
Signed-off-by: agardner <agardner@linuxfoundation.org>

Pharos Dashboard: Add manual resource management

Dev Pods are now managed by checking the "Dev pod" box in the Admin
Panel. This commit also fixes a dead image URL and the oauth process for the
dashboard URL.

Change-Id: Ic94160eb3a4504a369606261440df0e5354ac027
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Remove docs ci job complains issues

such as:
/home/jenkins-ci/opnfv/slave_root/workspace/docs-verify-rtd-master\
/docs/submodules/pharos/docs/labs/orange-lannion-lab/index.rst:201:
ERROR: Unexpected indentation.

Change-Id: I258ca061758e73ab576e44af5e4e2fed5e3cdb21
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Adding Labels

Labels serve as anchors/ refs when referenced from other documents
This patch adds labels to docs/*/*/index.rst

Change-Id: I3dd866f0721b0c97d7c29fce0b275b29d0b2ddc8
Signed-off-by: ShubhamRathi <shubhamiiitbackup@gmail.com>

pod1.yaml for common configuration file

modifications:
1. use list to replace fixed names;
2. use structure to avoid deplicated info;
3. rearrage the structure;
4. delete nic parameters from jumpserver
5. remove address and mac_address from remoteparas

Change-Id: I4bc7e1ecf0321e852bbbe43c2ebc9a1291f7a78f
Signed-off-by: Jack Morgan <jack.morgan@intel.com>

Add booking communication reference implementation

JIRA: PHAROS-265

This adds an implementation of a booking communication agent that
listens for booking notifications from the dashboard and updates the pod
status in the dashboard.

Change-Id: I1ea22390a46182a185df9c5e1771c9312d462092
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add library for dashboard notification System

JIRA: PHAROS-265

Change-Id: Ia33235c5160ef6b36b27a6fe1a2eb97a45e72367
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add library for dashboard API

JIRA: PHAROS-265

The DashboardAPI class can be used to query and update dashboard data.

Change-Id: I584a3cc500ff1d67011c18af4e73e504126310a2
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Merge "Add pharos-validator tool"

Add unit tests

JIRA: RELENG-12

This commit increases test statement coverage to 84%. It also fixes the bugs
that emerged while testing.

Change-Id: I696091f1a07f8b7647872c7cb15f4368a4690619
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Sync dashboard user data with jira

JIRA: PHAROS-264

Change-Id: Ic4533af04946ee0493c762ca79aaf46ee0f80e00
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Merge "Add Installer and Scenario fields to bookings"

Add Lannion lab in doc

Change-Id: Ic1ad5e5aa3e2fecc67db0daf78b64a8e3c2d5bb7
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Add Installer and Scenario fields to bookings

JIRA: PHAROS-272

Change-Id: I28f44bfadb1dbe3cb0caca0a8038fba988cf26f9
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add pharos-validator tool

Change-Id: I38e077c2c90059e39ee9871abf5d867a875827a3
Signed-off-by: Todd Gaunt <singularik@iol.unh.edu>

Add database migration files

Change-Id: Id24ced5dc7d71861df9899d472edb26f5805da50
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Restructure dashboard project for docker deploying

Change-Id: I13cad51270504ee4bed8558598a8891af58a26ab
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Merge "update the huawei's lab"

Add license headers

JIRA: RELENG-12

Change-Id: I6aeb82b2f72d086b70737f86282f8ed0c48f83cf
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Merge changes from topic 'pharos-dashboard'

* changes:
  Add a REST API for the dashboard
  Send notifications for booking start and end

Fix no-license issue

delete docs/etc/ for they are not used anymore
add license info for yaml files

Change-Id: Ibac03b338700fcb52ca7c290b594b7f874f53d5c
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Merge "Update the file naming"

Merge "Implement notification framework"

Merge "Fix table HTML"

update the huawei's lab

Change-Id: I96c046b298bd915716b67790515ad9a555e6f62c
Signed-off-by: Wutianwei <wutianwei1@huawei.com>

Pharos spec: AArch64 additions

Change-Id: I42bdd5301bb9d45a8d3e806298ff138c21d9c220
Signed-off-by: Alexandru Avadanii <Alexandru.Avadanii@enea.com>

Adding Julien Zhang back to committer list

Change-Id: I79acf4e3226d90271e16b59ace5c553f55d0995e
Signed-off-by: Jack Morgan <jack.morgan@intel.com>

Renaming the specification to index.rst to follow colorado guidelines.

Change-Id: I0d8d12f923f3f925537be7fd32d118c4497802d5
Signed-off-by: ChristopherPrice <christopher.price@ericsson.com>

Add a REST API for the dashboard

JIRA: PHAROS-265

Change-Id: Ic1b2d20415b0b84473d5915c4f26f3e65bbb1ecf
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Send notifications for booking start and end

JIRA: PHAROS-265

Change-Id: I53a37ac31dda70935752afc6da3315e6dfcbc90f
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Implement notification framework

JIRA: PHAROS-265

The framework can be used by the dashboard and the labs to exchange
notifications about booking events and pod status.

Change-Id: Ibd7cd353c4933f7662d5368182faef8298b85efc
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Fix table HTML

JIRA: RELENG-12

Change-Id: I780c1fc0daab9ee2f2599c51f31eb416a2c7dbbf
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Update the file naming

Update lab and pod name according to discussion of Pharos meeting on
Sep.14, consistent naming for labs directory:
https://wiki.opnfv.org/display/pharos/Pharos+git+repo

Change-Id: I54520dda3f0662e42b8c1199f23036ced65b73bf
Signed-off-by: Julien <zhang.jun3g@zte.com.cn>

Merge "fix image path"

Add user info panel

JIRA: PHAROS-264

Change-Id: I5404812a78755ce1026401b8dda1f0d167dc6fda
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add info to the resource view

JIRA: PHAROS-266

This adds a panel containing lab owner contact information, jenkins
utilization timerange options and a table containing vpn users of a pod
to the resource view.

Change-Id: If991c74d3c93cd08f622771acc048ab998e16c48
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add utilization column to dev pod tab

JIRA: PHAROS-263

Change-Id: I25d5d4bf4ecc23febdc0c11eae3298ada9372e83
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add booking utilization chart

JIRA: PHAROS-263

Change-Id: I3a3a5115a1cf7742f9ac5a3ec753699c36b49815
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

fix image path

Change-Id: Ie8fd1267dfb83c019e2999b01c614ae18aafca9a
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Remove first prototype of the Pharos Dashboard

The Dashboard implementation from Max is im progress and
more advanced than the initial one. It doesn't make sense
to maintain both of them.

Change-Id: Iabea63a7e5b6e8d64cb72b8de2264c5c4484eae8
Signed-off-by: jose.lausuch <jose.lausuch@ericsson.com>

Merge "Revert "Minor updates to info file""

Revert "Minor updates to info file"

This reverts commit e556a63cc5f78598e890346889948765906a6411.

Change-Id: I92a63e1849f71384e07937d4aa1458752d29bfec
Signed-off-by: Morgan Richomme <morgan.richomme@orange.com>

Merge "Add a Resource detail view"

Merge changes from topic 'pharos-dashboard'

* changes:
  Add a Booking detail view
  Remove development settings

modif 1  orange lannion pod2 description

Change-Id: I60674c8f8e2bfd0a77950044002a44100439c8fb
Signed-off-by: blelamer <bertrand.lelamer@orange.com>

Add a Resource detail view

JIRA: RELENG-12

The resource page contains an utilization diagram, future bookings with
their jira tickets and a list of servers.

Change-Id: I2123ccbe96cde29a56af32b933ebbf6ba2668ed1
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Add a Booking detail view

JIRA: RELENG-12

This adds a pop-up to the booking calendar, containing information
about a selected booking.

Change-Id: Ie780006963cb927d073103edbaefbdab3de403fb
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Remove development settings

JIRA: RELENG-12

Change-Id: I0a481c95e7acb17ca2efe9be1e90b2e49a7e8104
Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Merge "Due to migration, update zte-pod1 and zte-pod2 info."

Due to migration, update zte-pod1 and zte-pod2 info.

JIRA: PHAROS-245

Change-Id: I3f8b20d3fea0bf00a210459b950186219c3c43f0
Signed-off-by: wu.zhihui <wu.zhihui1@zte.com.cn>

Merge changes from topic 'pharos-dashboard'

* changes:
  Create Jira issue for new booking
  Remove database migration files

Updated Ericsson OPNFV Lab Information for Colorado release

Fixes Whitespaces and some syntactical errors
Added update and links to Ci/CD pages for Permanent Labs.

Change-Id: I82de92a39bb48b3a6bf84a1678f4b7d7c1115630
Signed-off-by: Daniel Smith <daniel.smith@ericsson.com>
JIRA: 007

Create Jira issue for new booking

JIRA: RELENG-12

The issue is assigned to the lab owner and to the POD Access Request
Component. The pgp and ssh keys are uploaded to jira as an attachement.

Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Remove database migration files

JIRA: RELENG-12

Signed-off-by: maxbr <maxbr@mi.fu-berlin.de>

Merge "Use Jira Oauth for user authentication"

Merge "Add a resource utilization page"

Merge "Implement periodic tasks"

Merge "Split the dashboard into different apps, add tests"