Allows ONOS to use compute nodes with br-ex no IP

ONOS needs the capability to have br-ex on compute nodes with no IP for
L3 functionality to work correctly on baremetal.  This patch allows that
capability, and makes it default behavior (sdn_l3 true).  If desired, a
user can set sdn_l3 to false, and compute nodes public interface will be
a regular interface with no IP for ONOS deployments.

JIRA: APEX-64

Change-Id: I578b946edbddf7fc9c29363c78fec2c3ada48cf6
Signed-off-by: Tim Rozet <trozet@redhat.com>

Patches keystone endpoint setup to include Aodh

Note this behavior has changed in TripleO post Brahmaputra.  The
endpoints and services are created in THT rather than hardcoded in
tripleoclient.

JIRA: APEX-65

Change-Id: Ie595f2778fb509213e2992bf1ef60df82cf22666
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Fixes ONOS external network"

Fixes ONOS external network

ONOS public network needs to not have IPs on the compute nodes' public
interface.

JIRA: APEX-64

Change-Id: I0d4d97b1b7dcaa39395940da03ae6b19f1dd9eb0
Signed-off-by: Tim Rozet <trozet@redhat.com>

Add Aodh IP to network environment

Change-Id: Ie34926c9379b62d53f0008db684dda0f3737273a

Merge "fixes to initial sfc code"

Merge "Adds licenses and fixes ODL L3"

fixes to initial sfc code

- xfs grow bug workaround
- using 3.0.0 tag of puppet-opendaylight
- update installation procedure for OVS-NSH

    JIRA: APEX-46
    JIRA: APEX-48

Change-Id: I2a8cf5430a325c03a75b27fd05a011aa82f6c755

Adds licenses and fixes ODL L3

JIRA: APEX-62

Change-Id: Ide34d9971cd6ac987b5994f5e23b4cfa58f92b29
Signed-off-by: Tim Rozet <trozet@redhat.com>

adding nf_conntrack_proto_sctp to modules-load

JIRA: APEX-63

Change-Id: I4155111eb2c19d74e0f265ccac25756f35bb41a0

Merge "adding SFC overcloud image"

adding SFC overcloud image

JIRA: APEX-46
JIRA: APEX-48

Change-Id: Ic2a0d9035429c5887d10f60febacff63dd2eeb5e

Fixes enabling L3 ODL incorrectly

Param was set to true when it should have been 'yes'

JIRA: APEX-62

Change-Id: I9f9ca3461f3730e5fcf470249e872f71ae3ba938
Signed-off-by: Tim Rozet <trozet@redhat.com>

Aodh

Add support for Aodh. Current packaged module is out of date
and the module is very young, so it is pulled from git on liberty branch.

Change-Id: Iff72c8b63970021e212bb9d78f9a805d108f0bcf

Fixes cinder quota failures by using correct keystone auth

JIRA: APEX-59

Change-Id: I0eca415c30cc3fa2377bed3dfc640cc71da3dae7
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Restructured the installation-instruction file into indexed sub files"

Restructured the installation-instruction file into indexed sub files

Take-two of this patch,
originally merged: f479b77c4f7c0d11196e3902bb7e60ff8e34a1fe
reverted: bffb8e0e27f21934a4bbb1138427f2adda6c583d

Created a section based structure for the installation-instruction.
It should show on the html artifact as a structured web page.  We may want to move
some sections to other directories to incorporate them into the release configguide.
Left that for step 2...

Now includes updates to the rpm spec so as not to break the build.

Change-Id: I7c0d46467de668883fcd29ae7deaa20151bacdb2
Signed-off-by: ChristopherPrice <christopher.price@ericsson.com>
Signed-off-by: Dan Radez <dradez@redhat.com>

Fixes external br-ex mapping for L3 agent

We were accidentally setting the external default bridge to "" in
l3_agent.ini.  This was causing external router interfaces to be placed
on br-int instead of br-ex.  Note: this behavior changes in Mitaka

JIRA: APEX-61

Change-Id: Icbb2ba433a012d0e8771b7d82dec64464e526c7a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Revert "Restructured the installation-instruction file into indexed sub files""

Revert "Restructured the installation-instruction file into indexed sub files"

This reverts commit f479b77c4f7c0d11196e3902bb7e60ff8e34a1fe.

Change-Id: I02b0d6e9f802765fe5a773547b8c43a10b260755

Merge "Fixes ODL L3 so that it now deploys correctly"

Merge "Restructured the installation-instruction file into indexed sub files"

Fixes ODL L3 so that it now deploys correctly

Fixes:
 - opendaylight was not being installed on controllers due to missing
   param
 - controller nics were not being found due to using computes extension
   of br-ex for ODL L3 (controllers have br-ex by default)

Change-Id: Ic1b6d57fe162194030607856120a742dbed1e9e2
Signed-off-by: Tim Rozet <trozet@redhat.com>

Adds ODL L3 and external network support on compute nodes

Adds support for ODL L3 which uses DVR (distributed virtual routing).
Due to DVR compute nodes must have br-ex.  In addition, neutron must
force metadata via dhcp agent, since there is no neutron L3 agent
running.  ODL L3 runs as custom plugin to neutron.

Also adds support for configuring IP on public NIC now by default.  This
is needed for ONOS deployment, and access via public interface.

Change-Id: I5df0e49bd903efacf8c87486da27576b01ce5779
Signed-off-by: Tim Rozet <trozet@redhat.com>

add step to execute gw_mac_update.sh after apex deployed

Change-Id: I47c316e26ff8e597c781562645397335e8c5bd70
Signed-off-by: bob zhou <bob.zh@huawei.com>
Signed-off-by: Tim Rozet <trozet@redhat.com>

bug fix of onos deployment failed
change folder name of onos puppet to fix file not found error.

Change-Id: I6cdee189e43c66ec8a49bbf736a6c28763638880
Signed-off-by: bob_zhou <bob.zh@huawei.com>

Restructured the installation-instruction file into indexed sub files

Created a section based structure for the installation-instruction.
It should show on the html artifact as a structured web page.  We may want to move
some sections to other directories to incorporate them into the release configguide.
Left that for step 2...

Change-Id: I4e2b4f398cbb0f4203166af68520ce4ecd82a328
Signed-off-by: ChristopherPrice <christopher.price@ericsson.com>

Merge "Adds scenario deploy settings files"

Adds scenario deploy settings files

Changes include:
 - Scenarios for opencontrail, onos, sfc, odl l2/l3
 - Minor fix to error print statement
 - Post Config is now disabled when using --flat

Change-Id: I5f3686dda4c4a573b1777916669053593852676a
Signed-off-by: Tim Rozet <trozet@redhat.com>

fix onos package bug

Change-Id: I5994159ec3c48ed1bf66a5d90efd1d3c0800cc0e
Signed-off-by: bob zhou <bob.zh@huawei.com>

splitting rpm into multiple rpms

- code in the common rpm
- instack in the instack rpm
- undercloud in an rpm that will be named per sdn in the future

Change-Id: I969277daf87f67da6934cad7268c96efda6960c7

version cleanup and increment for Bramaputra Release

Change-Id: I2df7f498aad507e155ce6a4ba1cf20b75d0e67b9

Merge "Deploy failed due to .ssh already existing"

Deploy failed due to .ssh already existing

In a local test, I observed virt-customize failing during ssh
key injection

Injecting ssh key to instack VM
[   0.0] Examining the guest ...
[  48.0] Setting a random seed
[  48.0] Running: mkdir /root/.ssh/
mkdir: cannot create directory '/root/.ssh/': File exists
virt-customize: mkdir /root/.ssh/: command exited with an error

Adding -p should prevent this from happening.

Change-Id: If8f085cba3083ccf3d5e8f648a9830f142ea53d9

Fixes attaching networks for baremetal only to admin/public

We should only bridge to admin/public for baremetal deployments.  There
is no reason for us to bridge to the private or storage networks on
instack for deployment.

Also fixes OpenDaylight to Lithium 3.3

Change-Id: I2eb8f83ddbcb69d3219e7927025b46dcb9550ba9
Signed-off-by: Tim Rozet <trozet@redhat.com>

quick fixes to deploy and clean

- adding a missing exit 1 in the deploy script
- setting link up on hypervisor bridges
- redirecting error from cleanup commands so they're not so chatty

Change-Id: I844c35effb2817948ea096b07a34d83678803e00

Merge "Enables private and storage networks"

Enables private and storage networks

Fixes issues with common-functions:
 - ipcalc in epel is old and does not support HOSTMIN,HOSTMAX.  Now
   BROADCAST and NETWORK values used to find first and last IP in
   subnet.
 - fixes to auto-generation where values conflicted for IP ranges
 - provisioner_ip now generated correctly

Change-Id: I03c7f841d2e1edb1a50041f53970318b6a718cd9
Signed-off-by: Tim Rozet <trozet@redhat.com>

Fixes neutron net creation for post config

Neutron external net should be creatd on overcloud

Change-Id: I2c845e9af40d5dbe0106e542e24b9ef1b6169e31
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "adding doc for new settings files"

adding doc for new settings files

Change-Id: I309ef5be4bff48ed1960512daba025d9872c9a49

Adds post install configuration

Changes include:
 - Neutron external network now configured post deployment
 - IP addresses assigned to admin and public OVS bridges if missing

Change-Id: I7a3e8822b43640578db809c3f4d55f399383c1f1
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "dumping deploy command into a file to save it for redeployment"

enabling ceph

Change-Id: I2dc1bf7ffebb6a83face87a62a81cfb15f9a0689

dumping deploy command into a file to save it for redeployment

Change-Id: I482e84bbe3f21f425e6bce74fdfa16f71bf12654

Fixes attach/detach functions and minor netenv fix

Tested manually and verified on LF pod1

Change-Id: I882ad9beef003a795585ffb8542aa11aecb67949
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Fixes attaching instack interfaces to host"

Fixes attaching instack interfaces to host

This applies only to baremetal deployments.  Interfaces from admin and
public networks are attached from the host to the OVS bridges brbm and
brbm2 for external connectivity.

Change-Id: If3f5b33eab267e05ee9094396daa40f37e69319a
Signed-off-by: Tim Rozet <trozet@redhat.com>

Adds onos support

Changes include:
 - ONOS artifacts are cached on build server until moved to OPNFV artifacts
 - tht patch is now unified to single opnfv patch, based on upstream
   commit 0f41e0d0309c7bc061dbaed6a8c1e38cb4bdfe19

Change-Id: Iea3d14773dded6c9709c08ef1beb47b254582860
Signed-off-by: bob zhou <bob.zh@huawei.com>
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "add 'sudo' for 'opnfv-deploy' command lines"

Merge "editorial fixes in apex docs"

Moves builds to use local images, minor fix to clean

Change-Id: Ib8a3baa645c4e2a2b7b5c39e8642bae367981f37
Signed-off-by: Tim Rozet <trozet@redhat.com>

add 'sudo' for 'opnfv-deploy' command lines

Change-Id: I03576a041c6bfdbb288c579379b4307fa52a0283
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

editorial fixes in apex docs

- add gitignore entries
- drop common files under docs/etc
- fix documentation titles
- fix doc8 violation (length of lines)
- removal of '_sha1_' for doc tracking
- removal of opnfv logo insertion

Change-Id: Ib0b39704c115f896f62a8ed8ec52257fcf84d544
Signed-off-by: Ryota MIBU <r-mibu@cq.jp.nec.com>

Moves rdo images URL to a new location for opnfv

Change-Id: I4e16b4a4432c935715f0522956614c891a695f70
Signed-off-by: Tim Rozet <trozet@redhat.com>

updating the odl patch so that OpenDaylightCount works properly

Change-Id: Icc453e3d5dc502ecedd696bad51399c55ed32996

Adds some network parsing for baremetal deployments and other fixes

Changes include:
 - Fixes Intel Pod 2 inventory file
 - Check for DHCP server on the host and disable
 - Adds realistic+common network-settings file
 - Modifies baremetal deployments to bridge to correct interface
 - Adds private/storage network OVS bridges
 - Parses network-settings into valid network-environment variables
 - If certain network-settings are missing they will be auto-detected

Note: The actual settings set forth for deployment only include
admin/external networks at the moment.  Private/storage networks will be
handled in an upcoming patch.

JIRA: APEX-50

Change-Id: I0a1a86f37c08702a93fe167688c3149ba5573db4
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "Image fix to force flavor to be 39GB"

Image fix to force flavor to be 39GB

Testing if this fixes current CI breakage

Change-Id: Ib4f75a9a1772c5363afab6d24b7a254f8cf6f6f8
Signed-off-by: Tim Rozet <trozet@redhat.com>

Merge "cleaning out some tarball manipulations from Makefile that are unnessesary"

Merge "adding openvswitch dependency to installation instructions"

Added node role configuration

If there are dedicated HW nodes for controller and compute nodes,
it should be possible to define node roles in configuration files.

This patch introduces "capabilities" property into
pod_example_settings.yaml so as adds needed flavor definitions
and overcloud deploy parameters into opnfv-deploy script.

Change-Id: Ie62d3fa215aa168390d074c73fdb2fa03ecc67f5
Signed-off-by: Viktor Tikkanen <viktor.tikkanen@nokia.com>

adding openvswitch dependency to installation instructions

Change-Id: Ie79385905a73963ebac34ebda36a0d65539eeee7

Merge "adding build deps"

cleaning out some tarball manipulations from Makefile that are unnessesary

Change-Id: I4a585a5e72872fa1887aa4487ebd7b17d07feacc

adding build deps

- adding rpmbuild and createrepo as build deps
- adding more packages to overcloud image

Change-Id: I1cac2f62c7a52ee8bf2b0dc936df1066eb3599e8

Adding network configuration options

- enabling subnet configuration for undercloud
- enabling external network configuration

Change-Id: Id1951d31faa1a68f850a75e2466d30b8abcea8ac

build_updates

- forcing wget for centos artifacts
- extra checking for undercloud ip

Change-Id: I79d1919f86d83fbf6a5d284bd3257fd40f9c7018

remove openstack-neutron-openvswitch, odl manages ovs

Change-Id: I799eee7713f5dae213f97f3d9f59dc2defaf3159

Merge "Fixes various corner cases with clean and deploy"

Fixes various corner cases with clean and deploy

Fixes Include:
 - Fixed info print statement when using flat network
 - deploy now looks at arp table as well to determine instack IP address
   as default leases file may not exist
 - clean now uses --pool with vol-delete command

JIRA: APEX-50

Change-Id: I664fd06e92e0890e0b65191851dfa81f8d8ac492
Signed-off-by: Tim Rozet <trozet@redhat.com>

fixing disabling l3 HA neutron option and removing duplicate ntp option

Change-Id: I6e3a4266be28b0f661e4b8e818c616000060905b

updating the repos so that master points to Mitaka

Change-Id: I7331dd91e6da3f82ba60689fffea8b2f46ff29db

updating the OpenDaylight patch

- using the proposed patched for upstream
- ensuring l3_ha is disabled
- exposing support for an ODL only node

Change-Id: I6f4a50300ea08322eea4ba466fc1a3b0fbcb5743
Signed-off-by: Dan Radez <dradez@redhat.com>

syntax fixes for if statements

Change-Id: I3ff4b0e9aecff8fc193017d0dc4cd3c4c1a6339c
Signed-off-by: Dan Radez <dradez@redhat.com>

switching to RDO build undercloud instead of building it ourselves

Change-Id: I9f09c195352d2d88a3da4f42e09424d96d39722b

Merge "Parses yaml files into deploy + other fixes"

Parses yaml files into deploy + other fixes

This patch allows deploy_settings.yaml and inventory settings to be
passed in via cmdline.  The deploy settings are overridden by cmdline
arguments.  For example, if a user specifies no_ha in cmdline it will
override what is in deploy_settings.yaml.  The inventory file provides
yaml input for the baremetal topology.

Fixes include:
 - New arguments for passing inventory and deploy_settings
 - "global_params" in deploy_settings are set as globals in script
(unless already set via cmdline)
 - "deploy_options" are loaded into an array, and checked for deployment
options (such as which SDN controller to use)
 - inventory file is parsed (for baremetal) into correct instack json
output.  The output is then written to a temp instackjson file and used
for deployment.
 - renaming of copy_materials to copy_materials_to_instack
 - spelling fixes
 - cmdline argument checking with errors and warnings

Note this patch does not yet tamper with setting network-environment
settings.

JIRA: APEX-53

Change-Id: I9dce197e23563480c584650ba967898312eab4e7
Signed-off-by: Tim Rozet <trozet@redhat.com>

adding quotes to a string check in deploy

Change-Id: I41881c914494e329570c76fba9f4e0f1dce50e50

Merge "adding build deps that have had to be installed manually"

Merge "adding flag to use flat underlay network"

Merge "Adds yaml files to use as input to Apex build/deploy"

adding build deps that have had to be installed manually

Change-Id: I1af7ffdb1d1e4b96b31b44f2750de23b55d9d540

adding flag to use flat underlay network

Change-Id: I12cbb68df993e27f9ff3c41185c4682a64349736

updating prebuilt images

- switching to updated source from RDO project
- adding md5sum check

Change-Id: Ib7b7172596ae38522694090529e81db3cc7ff03d

Adds yaml files to use as input to Apex build/deploy

yaml inputs are broken up into:
-build settings
-deploy options
-network definition
-pod baremetal information

JIRA: APEX-53

Change-Id: Iee85b17beb37ce82bf9312dcce61e09ae924dfc5
Signed-off-by: Tim Rozet <trozet@redhat.com>

adding some error handling

- make sure we connect to Instack
- enable the ping site to be configurable
- put ntp server in a variable so it can be made configurable later

Change-Id: I2ec30f6bab0b48ec878bd25790145f7fff00964a

adding installation instructions

JIRA: APEX-35

Change-Id: Iebbf85bd59844716961c27bb81ff7bbda2d1a1bf

Merge "Example as code, documentation template for sphinx build"

Enabling options for passing configuration files

- virtual deploys still expect to pull pre-canned files
  from $CONFIG dir
- non-virtual deploys now expect an instackenv.json
  and network-environment.yaml file in pwd on deploy

JIRA: APEX-41
JIRA: APEX-49

Change-Id: Ib61ac7448917ec1ea728c23cb3406feab9058f77

enable network-isoaltion and opendaylight

Change-Id: I2a506f95036b897309dbaf9120426bdf3f4a6337

updates and fixes to the iso build

- adding isohybrid so isos can be written to a USB
- adding base group to yum comps file for iso install

Change-Id: I3a8bda84b1a704f01e433f43533e63452f1a6e83

adding cleanup for build

Change-Id: If748e8fade74d3764c624f2b3a790421be4667e2

updates to cleanup.sh

- adding vol-delete to help ensure volumes are cleaned up
- adding brbm clean up

Change-Id: I3cbb79b09c6ac77dbc3c452938dbd6a6d03c815b

adding basic network isolation

- separating external traffic from internal traffic

JIRA: APEX-41

Change-Id: Idcd01a514083c53a3133a75d3bcabf824a7a4377

Merge "changing copying to linking to save time and space on the build"

changing copying to linking to save time and space on the build

Change-Id: I6a0a63f04c0693b9dd2f4a137475ef00c2377455

fixing non-ha deploy

The instackenv has 5 nodes in it but we were only putting two
back into the pool. This patch puts all 5 back in the pool
but doesn't throw the ha flags

JIRA: APEX-45

Change-Id: I1c539eafca9ed2f674a1a954f75c175fe9efc5bb

Merge "adding the opendaylight integration"

adding variable fix for clean up

Change-Id: I4e18bc0ddfb39a11c75070012743e6a68ecb70f6