Merge "armband: schedule deploy jobs earlier"
[releng.git] / jjb / joid / joid-deploy.sh
1 #!/bin/bash
2 # SPDX-license-identifier: Apache-2.0
3 ##############################################################################
4 # Copyright (c) 2016 Orange and others.
5 # All rights reserved. This program and the accompanying materials
6 # are made available under the terms of the Apache License, Version 2.0
7 # which accompanies this distribution, and is available at
8 # http://www.apache.org/licenses/LICENSE-2.0
9 ##############################################################################
10 set +e
11 set -o nounset
12
13 PWD_FILENAME="passwords.sh"
14
15 ##
16 ##
17 ##
18 function exit_on_error {
19     RES=$1
20     MSG=$2
21     if [ $RES != 0 ]; then
22         echo "FAILED - $MSG"
23         exit $RES
24     fi
25 }
26
27
28 ##
29 ## Create LAB_CONFIG folder if not exists
30 ##
31 mkdir -p $LAB_CONFIG
32
33 ##
34 ## Override default passwords with local settings if needed
35 ##
36
37 if [ -e "$LAB_CONFIG/$PWD_FILENAME" ]; then
38     echo "------ Load local passwords ------"
39     source $LAB_CONFIG/$PWD_FILENAME
40 else
41     export MAAS_USER=ubuntu
42     export MAAS_PASSWORD=ubuntu
43     export OS_ADMIN_PASSWORD=openstack
44 fi
45
46 ##
47 ## Set Joid pod config name
48 ##
49     # This part will be removed when pod names will be synced between jenkins and joid config
50     case $NODE_NAME in
51         *virtual*)
52             POD=default ;;
53         *)
54             POD=$NODE_NAME ;;
55     esac
56     export POD_NAME=${POD/-}
57
58 ##
59 ## Parse Network config
60 ##
61
62 EXTERNAL_NETWORK=${EXTERNAL_NETWORK:-}
63 # split EXTERNAL_NETWORK=name;type;first ip;last ip; gateway;network
64 IFS=';' read -r -a EXTNET <<< "$EXTERNAL_NETWORK"
65 EXTNET_NAME=${EXTNET[0]}
66 EXTNET_TYPE=${EXTNET[1]}
67 EXTNET_FIP=${EXTNET[2]}
68 EXTNET_LIP=${EXTNET[3]}
69 EXTNET_GW=${EXTNET[4]}
70 EXTNET_NET=${EXTNET[5]}
71
72 ##
73 ## Redeploy MAAS or recover the previous config
74 ##
75
76 cd $WORKSPACE/ci
77 if [ -e "$LAB_CONFIG/environments.yaml" ] && [ "$MAAS_REINSTALL" == "false" ]; then
78     echo "------ Recover Juju environment to use MAAS ------"
79     cp $LAB_CONFIG/environments.yaml .
80 else
81     MAASCONFIG=$WORKSPACE/ci/maas/${POD/-*}/${POD/*-}/deployment.yaml
82     echo "------ Set MAAS password ------"
83     sed -i -- "s/user: ubuntu/user: $MAAS_USER/" $MAASCONFIG
84     sed -i -- "s/password: ubuntu/password: $MAAS_PASSWORD/" $MAASCONFIG
85     echo "------ Redeploy MAAS ------"
86     ./02-maasdeploy.sh $POD_NAME
87     exit_on_error $? "MAAS Deploy FAILED"
88 fi
89
90 ##
91 ## Configure Joid deployment
92 ##
93
94 # Based on scenario naming we can get joid options
95 # naming convention:
96 #    os-<controller>-<nfvfeature>-<mode>[-<extrastuff>]
97 # With parameters:
98 #    controller=(nosdn|odl_l3|odl_l2|onos|ocl)
99 #       No odl_l3 today
100 #    nfvfeature=(kvm|ovs|dpdk|nofeature)
101 #       '_' list separated.
102 #    mode=(ha|noha)
103 #    extrastuff=(none)
104 #       Optional field - Not used today
105
106 IFS='-' read -r -a DEPLOY_OPTIONS <<< "${DEPLOY_SCENARIO}--"
107 #last -- need to avoid nounset error
108
109 SDN_CONTROLLER=${DEPLOY_OPTIONS[1]}
110 NFV_FEATURES=${DEPLOY_OPTIONS[2]}
111 HA_MODE=${DEPLOY_OPTIONS[3]}
112 EXTRA=${DEPLOY_OPTIONS[4]}
113
114 if [ "$SDN_CONTROLLER" == 'odl_l2' ] || [ "$SDN_CONTROLLER" == 'odl_l3' ]; then
115     SDN_CONTROLLER='odl'
116 fi
117 if [ "$HA_MODE" == 'noha' ]; then
118     HA_MODE='nonha'
119 fi
120 SRCBUNDLE="${WORKSPACE}/ci/${SDN_CONTROLLER}/juju-deployer/"
121 SRCBUNDLE="${SRCBUNDLE}/ovs-${SDN_CONTROLLER}-${HA_MODE}.yaml"
122
123
124 # Modify Bundle
125 echo "------ Set openstack password ------"
126 sed -i -- "s/admin-password: openstack/admin-password: $OS_ADMIN_PASSWORD/" $SRCBUNDLE
127
128 if [ -n "$EXTNET_NAME" ]; then
129     echo "------ Set openstack default network ------"
130     sed -i -- "s/neutron-external-network: ext_net/neutron-external-network: $EXTNET_NAME/" $SRCBUNDLE
131 fi
132
133 echo "------ Set ceph disks ------"
134 #Find the first line of osd-devices to change the one for ceph, then the other for ceph-osd
135 sed -i -- "s@osd-devices: /srv@osd-devices: $CEPH_DISKS@" $SRCBUNDLE
136 sed -i -r -- "s/^(\s+osd-reformat: )'no'/\1'$CEPH_REFORMAT'/" $SRCBUNDLE
137
138 ##
139 ## Configure Joid deployment
140 ##
141
142 echo "------ Deploy with juju ------"
143 echo "Execute: ./deploy.sh -t $HA_MODE -o $OS_RELEASE -s $SDN_CONTROLLER -l $POD_NAME -d $UBUNTU_DISTRO"
144
145 ./deploy.sh -t $HA_MODE -o $OS_RELEASE -s $SDN_CONTROLLER -l $POD_NAME -d $UBUNTU_DISTRO
146 exit_on_error $? "Main deploy FAILED"
147
148 ##
149 ## Set Admin RC
150 ##
151 JOID_ADMIN_OPENRC=$LAB_CONFIG/admin-openrc
152 echo "------ Create OpenRC file [$JOID_ADMIN_OPENRC] ------"
153
154 # get Keystone ip
155 case "$HA_MODE" in
156     "ha")
157         KEYSTONE=$(cat bundles.yaml |shyaml get-value openstack-phase2.services.keystone.options.vip)
158         ;;
159     *)
160         KEYSTONE=$(juju status keystone |grep public-address|sed -- 's/.*\: //')
161         ;;
162 esac
163
164
165 # get controller IP
166 case "$SDN_CONTROLLER" in
167     "odl")
168         SDN_CONTROLLER_IP=$(juju status odl-controller/0 |grep public-address|sed -- 's/.*\: //')
169         ;;
170     "onos")
171         SDN_CONTROLLER_IP=$(juju status onos-controller/0 |grep public-address|sed -- 's/.*\: //')
172         ;;
173     *)
174         SDN_CONTROLLER_IP='none'
175         ;;
176 esac
177 SDN_PASSWORD='admin'
178
179 # export the openrc file
180 cat << EOF > $JOID_ADMIN_OPENRC
181 export OS_USERNAME=admin
182 export OS_PASSWORD=$OS_ADMIN_PASSWORD
183 export OS_TENANT_NAME=admin
184 export OS_AUTH_URL=http://$KEYSTONE:35357/v2.0
185 export OS_REGION_NAME=Canonical
186 export OS_ENDPOINT_TYPE='adminURL'
187 export CINDER_ENDPOINT_TYPE='adminURL'
188 export GLANCE_ENDPOINT_TYPE='adminURL'
189 export KEYSTONE_ENDPOINT_TYPE='adminURL'
190 export NEUTRON_ENDPOINT_TYPE='adminURL'
191 export NOVA_ENDPOINT_TYPE='adminURL'
192 export SDN_CONTROLLER=$SDN_CONTROLLER_IP
193 export SDN_PASSWORD=$SDN_PASSWORD
194 export OS_INTERFACE=admin
195 EOF
196
197 ##
198 ## Backup local juju env
199 ##
200
201 echo "------ Backup Juju environment ------"
202 cp environments.yaml $LAB_CONFIG/
203
204 ##
205 ## Basic test to return a realistic result to jenkins
206 ##
207
208 echo "------ Do basic test ------"
209 source $JOID_ADMIN_OPENRC
210 curl -i -sw '%{http_code}' -H "Content-Type: application/json"   -d "
211 { \"auth\": {
212     \"identity\": {
213       \"methods\": [\"password\"],
214       \"password\": {
215         \"user\": {
216           \"name\": \"admin\",
217           \"domain\": { \"id\": \"default\" },
218           \"password\": \"$OS_ADMIN_PASSWORD\"
219         }
220       }
221     }
222   }
223 }"   http://$KEYSTONE:5000/v3/auth/tokens |grep "HTTP/1.1 20" 2>&1 >/dev/null;
224 exit_on_error $? "Deploy FAILED to auth to openstack"
225
226
227 ##
228 ## Create external network if needed
229 ##
230
231 # If we have more information than only the name, try to create it
232 if [ -z "$EXTNET_TYPE" ]; then
233     echo "------ No data for external network creation, pass ------"
234 elif [[ "$DEPLOY_SCENARIO" =~ "onos" ]]; then
235     echo "------ ONOS have created the external network, pass ------"
236 else
237     echo "------ External network creation ------"
238     neutron net-create $EXTNET_NAME --router:external True \
239       --provider:physical_network external --provider:network_type $EXTNET_TYPE
240     exit_on_error $? "External network creation failed"
241     neutron subnet-create $EXTNET_NAME --name $EXTNET_NAME \
242       --allocation-pool start=$EXTNET_FIP,end=$EXTNET_LIP \
243       --disable-dhcp --gateway $EXTNET_GW $EXTNET_NET
244     exit_on_error $? "External subnet creation failed"
245     neutron net-update $EXTNET_NAME --shared
246     exit_on_error $? "External network sharing failed"
247 fi
248
249 ##
250 ## Exit success
251 ##
252
253 echo "Deploy success"
254 exit 0