cleanup task.
[joid.git] / ci / 02-deploybundle.sh
1 #!/bin/bash
2 #placeholder for deployment script.
3 set -ex
4
5 #    ./02-deploybundle.sh $opnfvtype $openstack $opnfvlab $opnfvsdn $opnfvfeature $opnfvdistro
6
7 opnfvtype=$1
8 openstack=$2
9 opnfvlab=$3
10 opnfvsdn=$4
11 opnfvfeature=$5
12 opnfvdistro=$6
13 opnfvmodel=$7
14
15 if [[ "$opnfvmodel" = "openstack" ]]; then
16     #copy and download charms
17     cp $opnfvsdn/fetch-charms.sh ./fetch-charms.sh
18 else
19     cp kubernetes/fetch-charms.sh ./fetch-charms.sh
20 fi
21
22 jujuver=`juju --version`
23 maasver=`apt-cache policy maas | grep Installed | cut -d ':' -f 2 | sed -e 's/ //'`
24
25 #modify the ubuntu series wants to deploy
26 sed -i -- "s|distro=trusty|distro=$opnfvdistro|g" ./fetch-charms.sh
27
28 ./fetch-charms.sh $opnfvdistro
29
30 if [[ "$opnfvmodel" = "openstack" ]]; then
31     tar xvf common/scaleio.tar -C ./$opnfvdistro/ --strip=2 juju-scaleio/trusty/
32     osdomname=''
33 fi
34
35 #check whether charms are still executing the code even juju-deployer says installed.
36 check_status() {
37     retval=0
38     timeoutiter=0
39     while [ $retval -eq 0 ]; do
40        sleep 30
41        juju status > status.txt
42        if [ "$(grep -c "waiting" status.txt )" -ge 4 ]; then
43            echo " still waiting for machines ..."
44            if [ $timeoutiter -ge 240 ]; then
45                retval=1
46            fi
47            timeoutiter=$((timeoutiter+1))
48        else
49            retval=1
50        fi
51     done
52     echo "...... deployment finishing ......."
53 }
54
55 #read the value from deployconfig.yaml
56
57 PROFILE=maas
58 MAAS_IP=$(grep " ip_address" deployconfig.yaml | cut -d ':' -f 2 | sed -e 's/ //')
59 API_SERVERMAAS="http://$MAAS_IP/MAAS/"
60 if [ "$maasver" > "2" ]; then
61     API_KEY=`sudo maas-region apikey --username=ubuntu || true`
62 else
63     API_KEY=`sudo maas-region-admin apikey --username=ubuntu || true`
64 fi
65
66
67 if [[ "$API_KEY" = "" ]]; then
68     if [ "$maasver" > "2" ]; then
69         API_KEY=`sshpass -p ubuntu ssh ubuntu@$MAAS_IP 'sudo maas-region apikey --username=ubuntu'`
70     else
71         API_KEY=`sshpass -p ubuntu ssh ubuntu@$MAAS_IP 'sudo maas-region-admin apikey --username=ubuntu'`
72     fi
73 fi
74
75 maas login $PROFILE $API_SERVERMAAS $API_KEY
76
77 if [[ "$opnfvmodel" = "openstack" ]]; then
78     if [ -e ./deployconfig.yaml ]; then
79        extport=`grep "ext-port" deployconfig.yaml | cut -d ' ' -f 4 | sed -e 's/ //' | tr ',' ' '`
80        datanet=`grep "dataNetwork" deployconfig.yaml | cut -d ' ' -f 4 | sed -e 's/ //'`
81        admnet=`grep "admNetwork" deployconfig.yaml | cut -d ' ' -f 4 | sed -e 's/ //'`
82        cephdisk=`grep "ceph-disk" deployconfig.yaml | cut -d ':' -f 2 | sed -e 's/ //'`
83        osdomname=`grep "os-domain-name" deployconfig.yaml | cut -d ':' -f 2 | sed -e 's/ //'`
84     fi
85
86     if [ "$maasver" > "2" ]; then
87         workmutiple=`maas maas nodes read | grep "cpu_count" | cut -d ':' -f 2 | sed -e 's/ //' | tr ',' ' '`
88     else
89         workmutiple=`maas maas nodes list | grep "cpu_count" | cut -d ':' -f 2 | sed -e 's/ //' | tr ',' ' '`
90     fi
91     max=0
92     for v in ${workmutiple[@]}; do
93         if (( $v > $max )); then max=$v; fi;
94     done
95     echo $max
96
97     if [ "$max" -lt 4 ];then
98         workmutiple=1.1
99     elif [ "$max" -lt 33 ]; then
100         workmutiple=0.25
101     elif [ "$max" -lt 73 ]; then
102         workmutiple=0.1
103     else
104         workmutiple=0.05
105     fi
106     sed -i "s/worker_multiplier: 1.0/worker_multiplier: ${workmutiple}/g" default_deployment_config.yaml
107 fi
108
109 case "$opnfvlab" in
110      'juniperpod1' )
111          sed -i -- 's/10.4.1.1/172.16.50.1/g' ./bundles.yaml
112          sed -i -- 's/#ext-port: "eth1"/ext-port: "eth1"/g' ./bundles.yaml
113          ;;
114      'ravellodemopod' )
115          sed -i -- 's/#ext-port: "eth1"/ext-port: "eth2"/g' ./bundles.yaml
116         ;;
117 esac
118
119 # lets put the if seperateor as "," as this will save me from world.
120 fea=""
121 IFS=","
122 for feature in $opnfvfeature; do
123     if [ "$fea" == "" ]; then
124         fea=$feature
125     else
126         fea=$fea"_"$feature
127     fi
128 done
129
130 if [[ "$opnfvmodel" = "openstack" ]]; then
131     #update source if trusty is target distribution
132     var=os-$opnfvsdn-$fea-$opnfvtype"-"$opnfvdistro"_"$openstack
133
134     if [ "$osdomname" != "None" ]; then
135         var=$var"_"publicapi
136     fi
137 else
138     var=k8-$opnfvsdn-$fea-baremetal-core
139 fi
140
141 if [[ "$opnfvmodel" = "openstack" ]]; then
142     #lets generate the bundle for all target using genBundle.py
143     python genBundle.py  -l deployconfig.yaml  -s $var > bundles.yaml
144 else
145     #lets generate the bundle for k8 target using genK8Bundle.py
146     python genK8Bundle.py  -l deployconfig.yaml  -s $var > bundles.yaml
147 fi
148
149 #keep the back in cloud for later debugging.
150 pastebinit bundles.yaml || true
151
152 if [[ "$jujuver" < "2" ]]; then
153     echo "... Deployment Started ...."
154     juju-deployer -vW -d -t 7200 -r 5 -c bundles.yaml $opnfvdistro-"$openstack"-nodes
155     count=`juju status nodes --format=short | grep nodes | wc -l`
156     c=0
157     while [ $c -lt $count ]; do
158         juju ssh nodes/$c 'echo fs.inotify.max_user_watches=524288 | sudo tee -a /etc/sysctl.conf && sudo sysctl -p' || true
159         juju ssh nodes-compute/$c 'echo fs.inotify.max_user_watches=524288 | sudo tee -a /etc/sysctl.conf && sudo sysctl -p' || true
160         juju ssh nodes/$c 'echo 2048 | sudo tee /proc/sys/fs/inotify/max_user_instances' || true
161         juju ssh nodes-compute/$c 'echo 2048 | sudo tee /proc/sys/fs/inotify/max_user_instances' || true
162         let c+=1
163     done
164
165     juju-deployer -vW -d -t 7200 -r 5 -c bundles.yaml $opnfvdistro-"$openstack" || true
166 else
167     # with JUJU 2.0 bundles has to be deployed only once.
168     juju deploy bundles.yaml --debug
169     sleep 120
170     check_status
171     # seeing issue related to number of open files.
172     count=`juju status nodes --format=short | grep nodes | wc -l`
173     c=0
174     while [ $c -lt $count ]; do
175         juju ssh nodes/$c 'echo fs.inotify.max_user_watches=524288 | sudo tee -a /etc/sysctl.conf && sudo sysctl -p' || true
176         juju ssh nodes-compute/$c 'echo fs.inotify.max_user_watches=524288 | sudo tee -a /etc/sysctl.conf && sudo sysctl -p' || true
177         juju ssh nodes/$c 'echo 2048 | sudo tee /proc/sys/fs/inotify/max_user_instances' || true
178         juju ssh nodes-compute/$c 'echo 2048 | sudo tee /proc/sys/fs/inotify/max_user_instances' || true
179         let c+=1
180     done
181 fi
182
183 #lets gather the status of deployment once juju-deployer completed.
184 juju status --format=tabular