lib/post-install-functions.sh

   1 #!/usr/bin/env bash
   2 ##############################################################################
   3 # Copyright (c) 2015 Tim Rozet (Red Hat), Dan Radez (Red Hat) and others.
   4 #
   5 # All rights reserved. This program and the accompanying materials
   6 # are made available under the terms of the Apache License, Version 2.0
   7 # which accompanies this distribution, and is available at
   8 # http://www.apache.org/licenses/LICENSE-2.0
   9 ##############################################################################
  10
  11 ##Post configuration after install
  12 ##params: none
  13 function configure_post_install {
  14   local opnfv_attach_networks ovs_ip ip_range net_cidr tmp_ip af external_network_ipv6
  15   external_network_ipv6=False
  16   opnfv_attach_networks="admin"
  17   if [[ $enabled_network_list =~ "external" ]]; then
  18     opnfv_attach_networks+=' external'
  19   fi
  20
  21   echo -e "${blue}INFO: Post Install Configuration Running...${reset}"
  22
  23   echo -e "${blue}INFO: Configuring ssh for root to overcloud nodes...${reset}"
  24   # copy host key to instack
  25   scp ${SSH_OPTIONS[@]} /root/.ssh/id_rsa.pub "stack@$UNDERCLOUD":jumphost_id_rsa.pub
  26
  27   # add host key to overcloud nodes authorized keys
  28   ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" << EOI
  29 source stackrc
  30 nodes=\$(nova list | grep -Eo "[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+")
  31 for node in \$nodes; do
  32 cat ~/jumphost_id_rsa.pub | ssh -T ${SSH_OPTIONS[@]} "heat-admin@\$node" 'cat >> ~/.ssh/authorized_keys'
  33 done
  34 EOI
  35
  36   echo -e "${blue}INFO: Checking if OVS bridges have IP addresses...${reset}"
  37   for network in ${opnfv_attach_networks}; do
  38     ovs_ip=$(find_ip ${NET_MAP[$network]})
  39     tmp_ip=''
  40     if [ -n "$ovs_ip" ]; then
  41       echo -e "${blue}INFO: OVS Bridge ${NET_MAP[$network]} has IP address ${ovs_ip}${reset}"
  42     else
  43       echo -e "${blue}INFO: OVS Bridge ${NET_MAP[$network]} missing IP, will configure${reset}"
  44       # use last IP of allocation pool
  45       eval "ip_range=\${${network}_overcloud_ip_range}"
  46       ovs_ip=${ip_range##*,}
  47       eval "net_cidr=\${${network}_cidr}"
  48       if [[ $ovs_ip =~ ^[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+$ ]]; then
  49         af=4
  50       else
  51         af=6
  52         if [ "$network" == "external" ]; then
  53           ublic_network_ipv6=True
  54         fi
  55         #enable ipv6 on bridge interface
  56         echo 0 > /proc/sys/net/ipv6/conf/${NET_MAP[$network]}/disable_ipv6
  57       fi
  58       sudo ip addr add ${ovs_ip}/${net_cidr##*/} dev ${NET_MAP[$network]}
  59       sudo ip link set up ${NET_MAP[$network]}
  60       tmp_ip=$(find_ip ${NET_MAP[$network]} $af)
  61       if [ -n "$tmp_ip" ]; then
  62         echo -e "${blue}INFO: OVS Bridge ${NET_MAP[$network]} IP set: ${tmp_ip}${reset}"
  63         continue
  64       else
  65         echo -e "${red}ERROR: Unable to set OVS Bridge ${NET_MAP[$network]} with IP: ${ovs_ip}${reset}"
  66         return 1
  67       fi
  68     fi
  69   done
  70
  71   if [ "${deploy_options_array['dataplane']}" == 'ovs_dpdk' ]; then
  72     echo -e "${blue}INFO: Bringing up br-phy and ovs-agent for dpdk compute nodes...${reset}"
  73     compute_nodes=$(undercloud_connect stack "source stackrc; nova list | grep compute | wc -l")
  74     i=0
  75     while [ "$i" -lt "$compute_nodes" ]; do
  76       overcloud_connect compute${i} "sudo ifup br-phy; sudo systemctl restart neutron-openvswitch-agent"
  77       i=$((i + 1))
  78     done
  79   fi
  80
  81   # TODO fix this when HA SDN controllers are supported
  82   if [ "${deploy_options_array['sdn_controller']}" != 'False' ]; then
  83     echo -e "${blue}INFO: Finding SDN Controller IP for overcloudrc...${reset}"
  84     sdn_controller_ip=$(undercloud_connect stack "source stackrc;nova list | grep controller-0 | cut -d '|' -f 7 | grep -Eo [0-9]+\.[0-9]+\.[0-9]+\.[0-9]+")
  85     echo -e "${blue}INFO: SDN Controller IP is ${sdn_controller_ip} ${reset}"
  86     undercloud_connect stack "echo 'export SDN_CONTROLLER_IP=${sdn_controller_ip}' >> /home/stack/overcloudrc"
  87     undercloud_connect stack "echo 'export SDN_CONTROLLER_IP=${sdn_controller_ip}' >> /home/stack/overcloudrc.v3"
  88   fi
  89
  90   ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" <<EOI
  91 source overcloudrc
  92 set -o errexit
  93 echo "Configuring Neutron external network"
  94 if [[ -n "$external_nic_mapping_compute_vlan" && "$external_nic_mapping_compute_vlan" != 'native' ]]; then
  95   neutron net-create external  --router:external=True --tenant-id \$(openstack project show service | grep id | awk '{ print \$4 }') --provider:network_type vlan --provider:segmentation_id ${external_nic_mapping_compute_vlan} --provider:physical_network datacentre
  96 else
  97   neutron net-create external --router:external=True --tenant-id \$(openstack project show service | grep id | awk '{ print \$4 }') --provider:network_type flat --provider:physical_network datacentre
  98 fi
  99 if [ "$external_network_ipv6" == "True" ]; then
 100   neutron subnet-create --name external-net --tenant-id \$(openstack project show service | grep id | awk '{ print \$4 }') external --ip_version 6 --ipv6_ra_mode slaac --ipv6_address_mode slaac --gateway ${external_gateway} --allocation-pool start=${external_floating_ip_range%%,*},end=${external_floating_ip_range##*,} ${external_cidr}
 101 elif [[ "$enabled_network_list" =~ "external" ]]; then
 102   neutron subnet-create --name external-net --tenant-id \$(openstack project show service | grep id | awk '{ print \$4 }') --disable-dhcp external --gateway ${external_gateway} --allocation-pool start=${external_floating_ip_range%%,*},end=${external_floating_ip_range##*,} ${external_cidr}
 103 else
 104   # we re-use the introspection range for floating ips with single admin network
 105   neutron subnet-create --name external-net --tenant-id \$(openstack project show service | grep id | awk '{ print \$4 }') --disable-dhcp external --gateway ${admin_gateway} --allocation-pool start=${admin_introspection_range%%,*},end=${admin_introspection_range##*,} ${admin_cidr}
 106 fi
 107
 108 if [ "${deploy_options_array['gluon']}" == 'True' ]; then
 109   echo "Creating Gluon dummy network and subnet"
 110   neutron net-create --shared --provider:network_type vxlan GluonNetwork
 111   neutron subnet-create --name GluonSubnet --no-gateway --disable-dhcp GluonNetwork 0.0.0.0/1
 112 fi
 113
 114 echo "Removing sahara endpoint and service"
 115 sahara_service_id=\$(openstack service list | grep sahara | cut -d ' ' -f 2)
 116 sahara_endpoint_id=\$(openstack endpoint list | grep sahara | cut -d ' ' -f 2)
 117 [[ -n "\$sahara_endpoint_id" ]] && openstack endpoint delete \$sahara_endpoint_id
 118 [[ -n "\$sahara_service_id" ]] && openstack service delete \$sahara_service_id
 119
 120 echo "Removing swift endpoint and service"
 121 swift_service_id=\$(openstack service list | grep swift | cut -d ' ' -f 2)
 122 swift_endpoint_id=\$(openstack endpoint list | grep swift | cut -d ' ' -f 2)
 123 [[ -n "\$swift_endpoint_id" ]] && openstack endpoint delete \$swift_endpoint_id
 124 [[ -n "\$swift_service_id" ]] && openstack service delete \$swift_service_id
 125
 126 if [ "${deploy_options_array['dataplane']}" == 'fdio' ] || [ "${deploy_options_array['dataplane']}" == 'ovs_dpdk' ]; then
 127     for flavor in \$(openstack flavor list -c Name -f value); do
 128         echo "INFO: Configuring \$flavor to use hugepage"
 129         nova flavor-key \$flavor set hw:mem_page_size=large
 130     done
 131 fi
 132
 133 if [ "${deploy_options_array['congress']}" == 'True' ]; then
 134     ds_configs="--config username=\$OS_USERNAME
 135                 --config tenant_name=\$OS_PROJECT_NAME
 136                 --config password=\$OS_PASSWORD
 137                 --config auth_url=\$OS_AUTH_URL"
 138     for s in nova neutronv2 cinder glancev2 keystone; do
 139         ds_extra_configs=""
 140         if [ "\$s" == "nova" ]; then
 141             # nova's latest version is 2.38 but congress relies on nova to do
 142             # floating ip operation instead of neutron. fip support in nova
 143             # was depricated as of 2.35. Hard coding 2.34 for danube.
 144             # Carlos.Goncalves working on fixes for upstream congress that
 145             # should be ready for ocata.
 146             nova_micro_version="2.34"
 147             #nova_micro_version=\$(nova version-list | grep CURRENT | awk '{print \$10}')
 148             ds_extra_configs+="--config api_version=\$nova_micro_version"
 149         fi
 150         if openstack congress datasource create \$s "\$s" \$ds_configs \$ds_extra_configs; then
 151           echo "INFO: Datasource: \$s created"
 152         else
 153           echo "WARN: Datasource: \$s could NOT be created"
 154         fi
 155     done
 156     if openstack congress datasource create doctor "doctor"; then
 157       echo "INFO: Datasource: doctor created"
 158     else
 159       echo "WARN: Datsource: doctor could NOT be created"
 160     fi
 161 fi
 162
 163
 164 # Fix project_id and os_tenant_name not in overcloudrc
 165 # Deprecated openstack client does not need project_id
 166 # and os_tenant_name anymore but glance client and
 167 # Rally in general does need it.
 168 # REMOVE when not needed in Rally/glance-client anymore.
 169 for rcfile in overcloudrc overcloudrc.v3; do
 170     if ! grep -q  "OS_PROJECT_ID" \$rcfile; then
 171         project_id=\$(openstack project list |grep admin|awk '{print \$2}')
 172         echo "export OS_PROJECT_ID=\$project_id" >> \$rcfile
 173     fi
 174     if ! grep -q  "OS_TENANT_NAME" \$rcfile; then
 175        echo "export OS_TENANT_NAME=admin" >> \$rcfile
 176     fi
 177 done
 178 EOI
 179
 180   # we need to restart neutron-server in Gluon deployments to allow the Gluon core
 181   # plugin to correctly register itself with Neutron
 182   if [ "${deploy_options_array['gluon']}" == 'True' ]; then
 183     echo "Restarting neutron-server to finalize Gluon installation"
 184     overcloud_connect "controller0" "sudo systemctl restart neutron-server"
 185   fi
 186
 187   # for virtual, we NAT external network through Undercloud
 188   # same goes for baremetal if only jumphost has external connectivity
 189   if [ "$virtual" == "TRUE" ] || ! test_overcloud_connectivity && [ "$external_network_ipv6" != "True" ]; then
 190     if [[ "$enabled_network_list" =~ "external" ]]; then
 191       nat_cidr=${external_cidr}
 192     else
 193       nat_cidr=${admin_cidr}
 194     fi
 195     if ! configure_undercloud_nat ${nat_cidr}; then
 196       echo -e "${red}ERROR: Unable to NAT undercloud with external net: ${nat_cidr}${reset}"
 197       exit 1
 198     else
 199       echo -e "${blue}INFO: Undercloud VM has been setup to NAT Overcloud external network${reset}"
 200     fi
 201   fi
 202
 203   # for sfc deployments we need the vxlan workaround
 204   if [ "${deploy_options_array['sfc']}" == 'True' ]; then
 205       ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" <<EOI
 206 source stackrc
 207 set -o errexit
 208 for node in \$(nova list | grep -Eo "[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+"); do
 209 ssh -T ${SSH_OPTIONS[@]} "heat-admin@\$node" <<EOF
 210 sudo ifconfig br-int up
 211 sudo ip route add 123.123.123.0/24 dev br-int
 212 EOF
 213 done
 214 EOI
 215   fi
 216
 217   ### VSPERF ###
 218   if [[ "${deploy_options_array['vsperf']}" == 'True' ]]; then
 219     echo "${blue}\nVSPERF enabled, running build_base_machine.sh\n${reset}"
 220     overcloud_connect "compute0" "sudo sh -c 'cd /var/opt/vsperf/systems/ && ./build_base_machine.sh 2>&1 > /var/log/vsperf.log'"
 221   fi
 222
 223   # install docker
 224   if [ "${deploy_options_array['yardstick']}" == 'True' ] || [ "${deploy_options_array['dovetail']}" == 'True' ]; then
 225     ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" <<EOI
 226 sudo yum install docker -y
 227 sudo systemctl start docker
 228 sudo systemctl enable docker
 229 EOI
 230   fi
 231
 232   # pull yardstick image
 233   if [ "${deploy_options_array['yardstick']}" == 'True' ]; then
 234     ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" <<EOI
 235 sudo docker pull opnfv/yardstick
 236 EOI
 237   fi
 238
 239   # pull dovetail image
 240   if [ "${deploy_options_array['dovetail']}" == 'True' ]; then
 241     ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" <<EOI
 242 sudo docker pull opnfv/dovetail
 243 EOI
 244   fi
 245
 246   # Collect deployment logs
 247   ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" <<EOI
 248 mkdir -p ~/deploy_logs
 249 rm -rf deploy_logs/*
 250 source stackrc
 251 set -o errexit
 252 for node in \$(nova list | grep -Eo "[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+"); do
 253  ssh -T ${SSH_OPTIONS[@]} "heat-admin@\$node" <<EOF
 254  sudo cp /var/log/messages /home/heat-admin/messages.log
 255  sudo chown heat-admin /home/heat-admin/messages.log
 256 EOF
 257 scp ${SSH_OPTIONS[@]} heat-admin@\$node:/home/heat-admin/messages.log ~/deploy_logs/\$node.messages.log
 258 if [ "$debug" == "TRUE" ]; then
 259     nova list --ip \$node
 260     echo "---------------------------"
 261     echo "-----/var/log/messages-----"
 262     echo "---------------------------"
 263     cat ~/deploy_logs/\$node.messages.log
 264     echo "---------------------------"
 265     echo "----------END LOG----------"
 266     echo "---------------------------"
 267
 268     ssh -T ${SSH_OPTIONS[@]} "heat-admin@\$node" <<EOF
 269 echo "$node"
 270 sudo openstack-status
 271 EOF
 272 fi
 273  ssh -T ${SSH_OPTIONS[@]} "heat-admin@\$node" <<EOF
 274  sudo rm -f /home/heat-admin/messages.log
 275 EOF
 276 done
 277
 278 # Print out the undercloud IP and dashboard URL
 279 source stackrc
 280 echo "Undercloud IP: $UNDERCLOUD, please connect by doing 'opnfv-util undercloud'"
 281 echo "Overcloud dashboard available at http://\$(openstack stack output show overcloud PublicVip -f json | jq -r .output_value)/dashboard"
 282 EOI
 283
 284 if [[ "$ha_enabled" == 'True' ]]; then
 285   if [ "$debug" == "TRUE" ]; then
 286     echo "${blue}\nChecking pacemaker service status\n${reset}"
 287   fi
 288   overcloud_connect "controller0" "for i in \$(sudo pcs status | grep '^* ' | cut -d ' ' -f 2 | cut -d '_' -f 1 | uniq); do echo \"WARNING: Service: \$i not running\"; done"
 289 fi
 290
 291 if [ "${deploy_options_array['vpn']}" == 'True' ]; then
 292    # Check zrpcd is started
 293    overcloud_connect "controller0" "sudo systemctl status zrpcd > /dev/null || echo 'WARNING: zrpcd is not running on controller0'"
 294 fi
 295 }