ci/openstack.sh

   1 #!/bin/bash -ex
   2
   3 ##############################################################################
   4 # All rights reserved. This program and the accompanying materials
   5 # are made available under the terms of the Apache License, Version 2.0
   6 # which accompanies this distribution, and is available at
   7 # http://www.apache.org/licenses/LICENSE-2.0
   8 ##############################################################################
   9
  10 if [ -f ./deployconfig.yaml ];then
  11     EXTERNAL_NETWORK=`grep floating-ip-range deployconfig.yaml | cut -d ' ' -f 4 `
  12
  13     # split EXTERNAL_NETWORK=first ip;last ip; gateway;network
  14
  15     EXTNET=(${EXTERNAL_NETWORK//,/ })
  16
  17     EXTNET_FIP=${EXTNET[0]}
  18     EXTNET_LIP=${EXTNET[1]}
  19     EXTNET_GW=${EXTNET[2]}
  20     EXTNET_NET=${EXTNET[3]}
  21     EXTNET_PORT=`grep "ext-port" deployconfig.yaml | cut -d ' ' -f 4 | sed -e 's/ //' | tr ',' ' '`
  22     ADMNET_GW=`grep "admNetgway" deployconfig.yaml | cut -d ' ' -f 4 | sed -e 's/ //' | tr ',' ' '`
  23     API_FQDN=`grep "os-domain-name" deployconfig.yaml | cut -d ' ' -f 4 | sed -e 's/ //' | tr ',' ' '`
  24 fi
  25
  26 # launch eth on computer nodes and remove default gw route
  27 launch_eth() {
  28     computer_list=$(juju status --format short | grep -Eo 'nova-compute/[0-9]')
  29     for node in $computer_list; do
  30         echo "node name is ${node}"
  31         juju ssh $node "sudo ifconfig $EXTNET_PORT up"
  32         #juju ssh $node "sudo route del default gw $ADMNET_GW"
  33     done
  34 }
  35
  36 # Update gateway mac to onos for l3 function
  37 update_gw_mac() {
  38     ## get gateway mac
  39     EXTNET_GW_MAC=$(juju ssh nova-compute/0 "arp -a ${EXTNET_GW} | grep -Eo '([0-9a-fA-F]{2})(([/\s:-][0-9a-fA-F]{2}){5})'")
  40     ## set external gateway mac in onos
  41     juju set onos-controller gateway-mac=$EXTNET_GW_MAC
  42 }
  43
  44 unitAddress() {
  45         juju status | python -c "import yaml; import sys; print yaml.load(sys.stdin)[\"services\"][\"$1\"][\"units\"][\"$1/$2\"][\"public-address\"]" 2> /dev/null
  46 }
  47
  48 unitMachine() {
  49         juju status | python -c "import yaml; import sys; print yaml.load(sys.stdin)[\"services\"][\"$1\"][\"units\"][\"$1/$2\"][\"machine\"]" 2> /dev/null
  50 }
  51
  52 keystoneIp() {
  53     KEYSTONE=$(juju status keystone |grep public-address|sed -- 's/.*\: //')
  54     if [ $(echo $KEYSTONE|wc -w) == 1 ];then
  55         echo $KEYSTONE
  56     else
  57         juju get keystone | python -c "import yaml; import sys; print yaml.load(sys.stdin)['settings']['vip']['value']"
  58     fi
  59 }
  60
  61 # create external network and subnet in openstack
  62 create_openrc() {
  63     mkdir -m 0700 -p cloud
  64     keystoneIp=$(keystoneIp)
  65     adminPasswd=$(juju get keystone | grep admin-password -A 5 | grep value | awk '{print $2}' 2> /dev/null)
  66     configOpenrc admin $adminPasswd admin http://$keystoneIp:5000/v2.0 Canonical > cloud/admin-openrc
  67     chmod 0600 cloud/admin-openrc
  68 }
  69
  70 configOpenrc() {
  71 if [ "$API_FQDN" != "''" ]; then
  72     cat <<-EOF
  73         export OS_USERNAME=$1
  74         export OS_PASSWORD=$2
  75         export OS_TENANT_NAME=$3
  76         export OS_AUTH_URL=$4
  77         export OS_REGION_NAME=$5
  78         export OS_ENDPOINT_TYPE='internalURL'
  79         export CINDER_ENDPOINT_TYPE='internalURL'
  80         export GLANCE_ENDPOINT_TYPE='internalURL'
  81         export KEYSTONE_ENDPOINT_TYPE='internalURL'
  82         export NEUTRON_ENDPOINT_TYPE='internalURL'
  83         export NOVA_ENDPOINT_TYPE='internalURL'
  84 EOF
  85 else
  86     cat <<-EOF
  87         export OS_USERNAME=$1
  88         export OS_PASSWORD=$2
  89         export OS_TENANT_NAME=$3
  90         export OS_AUTH_URL=$4
  91         export OS_REGION_NAME=$5
  92 EOF
  93
  94 fi
  95 }
  96
  97 if [ "$API_FQDN" != "''" ]; then
  98     # Push api fqdn local ip to all /etc/hosts
  99     API_FQDN=$(juju get keystone | python -c "import yaml; import sys;\
 100         print yaml.load(sys.stdin)['settings']['os-public-hostname']['value']")
 101
 102     KEYSTONEIP=$(keystoneIp)
 103     juju run --all "if grep $API_FQDN /etc/hosts > /dev/null; then \
 104                         echo 'API FQDN already present'; \
 105                     else \
 106                         sudo sh -c 'echo $KEYSTONEIP $API_FQDN >> /etc/hosts'; \
 107                         echo 'API FQDN injected'; \
 108                     fi"
 109
 110     #change in jumphost as well as below commands will run on jumphost
 111
 112     if grep $API_FQDN /etc/hosts; then
 113         echo 'API FQDN already present'
 114     else
 115         sudo sh -c "echo $KEYSTONEIP $API_FQDN >> /etc/hosts"
 116         echo 'API FQDN injected'
 117     fi
 118 fi
 119
 120 # Create an load openrc
 121 create_openrc
 122
 123 . ./cloud/admin-openrc
 124
 125 ##
 126 ## removing the swift API endpoint which is created by radosgw.
 127 ## one option is not to used radosgw and other one is remove endpoint.
 128 ##
 129
 130 echo "Removing swift endpoint and service"
 131 swift_service_id=\$(openstack service list | grep swift | cut -d ' ' -f 2)
 132 swift_endpoint_id=\$(openstack endpoint list | grep swift | cut -d ' ' -f 2)
 133 openstack endpoint delete \$swift_endpoint_id
 134 openstack service delete \$swift_service_id
 135
 136 ##
 137 ## Create external subnet Network
 138 ##
 139
 140 #neutron net-create ext-net --shared --router:external=True
 141 neutron net-create ext-net --router:external=True
 142
 143 if [ "onos" == "$1" ]; then
 144     launch_eth
 145     neutron subnet-create ext-net --name ext-subnet \
 146        --allocation-pool start=$EXTNET_FIP,end=$EXTNET_LIP \
 147        --disable-dhcp --gateway $EXTNET_GW --dns-nameserver 8.8.8.8 $EXTNET_NET
 148     #neutron subnet-create ext-net --name ext-subnet $EXTNET_NET
 149     #update_gw_mac
 150 elif [ "nosdn" == "$1" ]; then
 151     neutron subnet-create ext-net --name ext-subnet \
 152        --allocation-pool start=$EXTNET_FIP,end=$EXTNET_LIP \
 153        --disable-dhcp --gateway $EXTNET_GW --dns-nameserver 8.8.8.8 $EXTNET_NET
 154     # configure security groups
 155     #neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol icmp --remote-ip-prefix 0.0.0.0/0 default
 156     #neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol tcp --port-range-min 22 --port-range-max 22 --remote-ip-prefix 0.0.0.0/0 default
 157 else
 158     neutron subnet-create ext-net --name ext-subnet \
 159        --allocation-pool start=$EXTNET_FIP,end=$EXTNET_LIP \
 160        --disable-dhcp --gateway $EXTNET_GW --dns-nameserver 8.8.8.8 $EXTNET_NET
 161 fi
 162
 163
 164 # Create Congress datasources
 165 sudo apt-get install -y python-congressclient
 166
 167 # Remove public endpoint and recreate it from internal
 168 # Waiting congress client can be use with internal endpoints
 169 if [ "$API_FQDN" != "''" ]; then
 170     CONGRESS_PUB_ENDPOINT=$(openstack endpoint list --service policy --interface public -c ID -f value)
 171     openstack endpoint delete $CONGRESS_PUB_ENDPOINT
 172     CONGRESS_NEW_PUB_ENDPOINT=$(openstack endpoint list --service policy --interface internal -c URL -f value)
 173     openstack endpoint create --region Canonical policy public $CONGRESS_NEW_PUB_ENDPOINT
 174 fi
 175
 176 openstack congress datasource create nova "nova" \
 177   --config username=$OS_USERNAME \
 178   --config tenant_name=$OS_TENANT_NAME \
 179   --config password=$OS_PASSWORD \
 180   --config auth_url=http://$keystoneIp:5000/v2.0
 181 openstack congress datasource create neutronv2 "neutronv2" \
 182   --config username=$OS_USERNAME \
 183   --config tenant_name=$OS_TENANT_NAME \
 184   --config password=$OS_PASSWORD \
 185   --config auth_url=http://$keystoneIp:5000/v2.0
 186 openstack congress datasource create ceilometer "ceilometer" \
 187   --config username=$OS_USERNAME \
 188   --config tenant_name=$OS_TENANT_NAME \
 189   --config password=$OS_PASSWORD \
 190   --config auth_url=http://$keystoneIp:5000/v2.0
 191 openstack congress datasource create cinder "cinder" \
 192   --config username=$OS_USERNAME \
 193   --config tenant_name=$OS_TENANT_NAME \
 194   --config password=$OS_PASSWORD \
 195   --config auth_url=http://$keystoneIp:5000/v2.0
 196 openstack congress datasource create glancev2 "glancev2" \
 197   --config username=$OS_USERNAME \
 198   --config tenant_name=$OS_TENANT_NAME \
 199   --config password=$OS_PASSWORD \
 200   --config auth_url=http://$keystoneIp:5000/v2.0
 201 openstack congress datasource create keystone "keystone" \
 202   --config username=$OS_USERNAME \
 203   --config tenant_name=$OS_TENANT_NAME \
 204   --config password=$OS_PASSWORD \
 205   --config auth_url=http://$keystoneIp:5000/v2.0
 206
 207
 208 ##enable extra stuff only if testing manually
 209
 210 #neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol icmp --remote-ip-prefix 0.0.0.0/0 default
 211 #neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol tcp --port-range-min 22 --port-range-max 22 --remote-ip-prefix 0.0.0.0/0 default
 212
 213 #wget -P /tmp/images http://download.cirros-cloud.net/0.3.3/cirros-0.3.3-x86_64-disk.img
 214 #openstack image create --file /tmp/images/cirros-0.3.3-x86_64-disk.img --disk-format qcow2 --container-format bare "cirros-0.3.3-x86_64"
 215 #wget -P /tmp/images http://cloud-images.ubuntu.com/trusty/current/trusty-server-cloudimg-amd64-disk1.img
 216 #openstack image create --file /tmp/images/trusty-server-cloudimg-amd64-disk1.img --disk-format qcow2 --container-format bare "ubuntu-trusty-daily"
 217 #wget -P /tmp/images http://cloud-images.ubuntu.com/trusty/current/xenial-server-cloudimg-amd64.tar.gz
 218 #openstack image create --file /tmp/images/xenial-server-cloudimg-amd64.tar.gz --container-format bare --disk-format raw "xenial-server-cloudimg-amd64"
 219
 220 #rm -rf /tmp/images
 221
 222 ## import key pair
 223 #openstack project create --description "Demo Tenant" demo
 224 #openstack user create --project demo --password demo --email demo@demo.demo demo
 225
 226 #openstack keypair create --public-key ~/.ssh/id_rsa.pub ubuntu-keypair
 227
 228 ## create vm network
 229 #neutron net-create demo-net
 230 #neutron subnet-create --name demo-subnet --gateway 10.20.5.1 demo-net 10.20.5.0/24
 231 #neutron router-create demo-router
 232 #neutron router-interface-add demo-router demo-subnet
 233 #neutron router-gateway-set demo-router ext-net
 234
 235 ## create pool of floating ips
 236 #i=0
 237 #while [ $i -ne 3 ]; do
 238 #    neutron floatingip-create ext-net
 239 #    i=$((i + 1))
 240 #done
 241
 242 ##http://docs.openstack.org/juno/install-guide/install/apt/content/launch-instance-neutron.html
 243 # netid=`neutron net-show demo-net -c id -f value`
 244 # nova boot --flavor m1.small --image cirros-0.3.3-x86_64 --nic net-id=$netid --security-group default --key-name ubuntu-keypair demo-instance1
 245 # nova floating-ip-associate demo-instance1 10.5.15.8
 246