Fixing verification of vbox drivers JIRA: BGS-74
[genesis.git] / foreman / ci / deploy.sh
1 #!/usr/bin/env bash
2
3 #Deploy script to install provisioning server for Foreman/QuickStack
4 #author: Tim Rozet (trozet@redhat.com)
5 #
6 #Uses Vagrant and VirtualBox
7 #VagrantFile uses bootsrap.sh which Installs Khaleesi
8 #Khaleesi will install and configure Foreman/QuickStack
9 #
10 #Pre-requisties:
11 #Supports 3 or 4 network interface configuration
12 #Target system must be RPM based
13 #Ensure the host's kernel is up to date (yum update)
14 #Provisioned nodes expected to have following order of network connections (note: not all have to exist, but order is maintained):
15 #eth0- admin network
16 #eth1- private network (+storage network in 3 NIC config)
17 #eth2- public network
18 #eth3- storage network
19 #script assumes /24 subnet mask
20
21 ##VARS
22 reset=`tput sgr0`
23 blue=`tput setaf 4`
24 red=`tput setaf 1`
25 green=`tput setaf 2`
26
27 declare -A interface_arr
28 ##END VARS
29
30 ##FUNCTIONS
31 display_usage() {
32   echo -e "\n\n${blue}This script is used to deploy Foreman/QuickStack Installer and Provision OPNFV Target System${reset}\n\n"
33   echo -e "\n${green}Make sure you have the latest kernel installed before running this script! (yum update kernel +reboot)${reset}\n"
34   echo -e "\nUsage:\n$0 [arguments] \n"
35   echo -e "\n   -no_parse : No variable parsing into config. Flag. \n"
36   echo -e "\n   -base_config : Full path of settings file to parse. Optional.  Will provide a new base settings file rather than the default.  Example:  -base_config /opt/myinventory.yml \n"
37   echo -e "\n   -virtual : Node virtualization instead of baremetal. Flag. \n"
38 }
39
40 ##find ip of interface
41 ##params: interface name
42 function find_ip {
43   ip addr show $1 | grep -Eo '^\s+inet\s+[\.0-9]+' | awk '{print $2}'
44 }
45
46 ##finds subnet of ip and netmask
47 ##params: ip, netmask
48 function find_subnet {
49   IFS=. read -r i1 i2 i3 i4 <<< "$1"
50   IFS=. read -r m1 m2 m3 m4 <<< "$2"
51   printf "%d.%d.%d.%d\n" "$((i1 & m1))" "$((i2 & m2))" "$((i3 & m3))" "$((i4 & m4))"
52 }
53
54 ##increments subnet by a value
55 ##params: ip, value
56 ##assumes low value
57 function increment_subnet {
58   IFS=. read -r i1 i2 i3 i4 <<< "$1"
59   printf "%d.%d.%d.%d\n" "$i1" "$i2" "$i3" "$((i4 | $2))"
60 }
61
62
63 ##finds netmask of interface
64 ##params: interface
65 ##returns long format 255.255.x.x
66 function find_netmask {
67   ifconfig $1 | grep -Eo 'netmask\s+[\.0-9]+' | awk '{print $2}'
68 }
69
70 ##finds short netmask of interface
71 ##params: interface
72 ##returns short format, ex: /21
73 function find_short_netmask {
74   echo "/$(ip addr show $1 | grep -Eo '^\s+inet\s+[\/\.0-9]+' | awk '{print $2}' | cut -d / -f2)"
75 }
76
77 ##increments next IP
78 ##params: ip
79 ##assumes a /24 subnet
80 function next_ip {
81   baseaddr="$(echo $1 | cut -d. -f1-3)"
82   lsv="$(echo $1 | cut -d. -f4)"
83   if [ "$lsv" -ge 254 ]; then
84     return 1
85   fi
86   ((lsv++))
87   echo $baseaddr.$lsv
88 }
89
90 ##removes the network interface config from Vagrantfile
91 ##params: interface
92 ##assumes you are in the directory of Vagrantfile
93 function remove_vagrant_network {
94   sed -i 's/^.*'"$1"'.*$//' Vagrantfile
95 }
96
97 ##check if IP is in use
98 ##params: ip
99 ##ping ip to get arp entry, then check arp
100 function is_ip_used {
101   ping -c 5 $1 > /dev/null 2>&1
102   arp -n | grep "$1 " | grep -iv incomplete > /dev/null 2>&1
103 }
104
105 ##find next usable IP
106 ##params: ip
107 function next_usable_ip {
108   new_ip=$(next_ip $1)
109   while [ "$new_ip" ]; do
110     if ! is_ip_used $new_ip; then
111       echo $new_ip
112       return 0
113     fi
114     new_ip=$(next_ip $new_ip)
115   done
116   return 1
117 }
118
119 ##increment ip by value
120 ##params: ip, amount to increment by
121 ##increment_ip $next_private_ip 10
122 function increment_ip {
123   baseaddr="$(echo $1 | cut -d. -f1-3)"
124   lsv="$(echo $1 | cut -d. -f4)"
125   incrval=$2
126   lsv=$((lsv+incrval))
127   if [ "$lsv" -ge 254 ]; then
128     return 1
129   fi
130   echo $baseaddr.$lsv
131 }
132
133 ##translates yaml into variables
134 ##params: filename, prefix (ex. "config_")
135 ##usage: parse_yaml opnfv_ksgen_settings.yml "config_"
136 parse_yaml() {
137    local prefix=$2
138    local s='[[:space:]]*' w='[a-zA-Z0-9_]*' fs=$(echo @|tr @ '\034')
139    sed -ne "s|^\($s\)\($w\)$s:$s\"\(.*\)\"$s\$|\1$fs\2$fs\3|p" \
140         -e "s|^\($s\)\($w\)$s:$s\(.*\)$s\$|\1$fs\2$fs\3|p"  $1 |
141    awk -F$fs '{
142       indent = length($1)/2;
143       vname[indent] = $2;
144       for (i in vname) {if (i > indent) {delete vname[i]}}
145       if (length($3) > 0) {
146          vn=""; for (i=0; i<indent; i++) {vn=(vn)(vname[i])("_")}
147          printf("%s%s%s=\"%s\"\n", "'$prefix'",vn, $2, $3);
148       }
149    }'
150 }
151
152 ##END FUNCTIONS
153
154 if [[ ( $1 == "--help") ||  $1 == "-h" ]]; then
155     display_usage
156     exit 0
157 fi
158
159 echo -e "\n\n${blue}This script is used to deploy Foreman/QuickStack Installer and Provision OPNFV Target System${reset}\n\n"
160 echo "Use -h to display help"
161 sleep 2
162
163 while [ "`echo $1 | cut -c1`" = "-" ]
164 do
165     echo $1
166     case "$1" in
167         -base_config)
168                 base_config=$2
169                 shift 2
170             ;;
171         -no_parse)
172                 no_parse="TRUE"
173                 shift 1
174             ;;
175         -virtual)
176                 virtual="TRUE"
177                 shift 1
178             ;;
179         *)
180                 display_usage
181                 exit 1
182             ;;
183 esac
184 done
185
186 ##disable selinux
187 /sbin/setenforce 0
188
189 # Install EPEL repo for access to many other yum repos
190 # Major version is pinned to force some consistency for Arno
191 yum install -y epel-release-7*
192
193 # Install other required packages
194 # Major versions are pinned to force some consistency for Arno
195 if ! yum install -y binutils-2* gcc-4* make-3* patch-2* libgomp-4* glibc-headers-2* glibc-devel-2* kernel-headers-3* kernel-devel-3* dkms-2* psmisc-22*; then
196   printf '%s\n' 'deploy.sh: Unable to install depdency packages' >&2
197   exit 1
198 fi
199
200 ##install VirtualBox repo
201 if cat /etc/*release | grep -i "Fedora release"; then
202   vboxurl=http://download.virtualbox.org/virtualbox/rpm/fedora/\$releasever/\$basearch
203 else
204   vboxurl=http://download.virtualbox.org/virtualbox/rpm/el/\$releasever/\$basearch
205 fi
206
207 cat > /etc/yum.repos.d/virtualbox.repo << EOM
208 [virtualbox]
209 name=Oracle Linux / RHEL / CentOS-\$releasever / \$basearch - VirtualBox
210 baseurl=$vboxurl
211 enabled=1
212 gpgcheck=1
213 gpgkey=https://www.virtualbox.org/download/oracle_vbox.asc
214 skip_if_unavailable = 1
215 keepcache = 0
216 EOM
217
218 ##install VirtualBox
219 if ! yum list installed | grep -i virtualbox; then
220   if ! yum -y install VirtualBox-4.3; then
221     printf '%s\n' 'deploy.sh: Unable to install virtualbox package' >&2
222     exit 1
223   fi
224 fi
225
226 ##install kmod-VirtualBox
227 if ! lsmod | grep vboxdrv; then
228   sudo /etc/init.d/vboxdrv setup
229   if ! lsmod | grep vboxdrv; then
230     printf '%s\n' 'deploy.sh: Unable to install kernel module for virtualbox' >&2
231     exit 1
232   fi
233 else
234   printf '%s\n' 'deploy.sh: Skipping kernel module for virtualbox.  Already Installed'
235 fi
236
237 ##install Ansible
238 if ! yum list installed | grep -i ansible; then
239   if ! yum -y install ansible-1*; then
240     printf '%s\n' 'deploy.sh: Unable to install Ansible package' >&2
241     exit 1
242   fi
243 fi
244
245 ##install Vagrant
246 if ! rpm -qa | grep vagrant; then
247   if ! rpm -Uvh https://dl.bintray.com/mitchellh/vagrant/vagrant_1.7.2_x86_64.rpm; then
248     printf '%s\n' 'deploy.sh: Unable to install vagrant package' >&2
249     exit 1
250   fi
251 else
252   printf '%s\n' 'deploy.sh: Skipping Vagrant install as it is already installed.'
253 fi
254
255 ##add centos 7 box to vagrant
256 if ! vagrant box list | grep chef/centos-7.0; then
257   if ! vagrant box add chef/centos-7.0 --provider virtualbox; then
258     printf '%s\n' 'deploy.sh: Unable to download centos7 box for Vagrant' >&2
259     exit 1
260   fi
261 else
262   printf '%s\n' 'deploy.sh: Skipping Vagrant box add as centos-7.0 is already installed.'
263 fi
264
265 ##install workaround for centos7
266 if ! vagrant plugin list | grep vagrant-centos7_fix; then
267   if ! vagrant plugin install vagrant-centos7_fix; then
268     printf '%s\n' 'deploy.sh: Warning: unable to install vagrant centos7 workaround' >&2
269   fi
270 else
271   printf '%s\n' 'deploy.sh: Skipping Vagrant plugin as centos7 workaround is already installed.'
272 fi
273
274 cd /tmp/
275
276 ##remove bgs vagrant incase it wasn't cleaned up
277 rm -rf /tmp/bgs_vagrant
278
279 ##clone bgs vagrant
280 ##will change this to be opnfv repo when commit is done
281 if ! git clone -b v1.0 https://github.com/trozet/bgs_vagrant.git; then
282   printf '%s\n' 'deploy.sh: Unable to clone vagrant repo' >&2
283   exit 1
284 fi
285
286 cd bgs_vagrant
287
288 echo "${blue}Detecting network configuration...${reset}"
289 ##detect host 1 or 3 interface configuration
290 #output=`ip link show | grep -E "^[0-9]" | grep -Ev ": lo|tun|virbr|vboxnet" | awk '{print $2}' | sed 's/://'`
291 output=`ifconfig | grep -E "^[a-zA-Z0-9]+:"| grep -Ev "lo|tun|virbr|vboxnet" | awk '{print $1}' | sed 's/://'`
292
293 if [ ! "$output" ]; then
294   printf '%s\n' 'deploy.sh: Unable to detect interfaces to bridge to' >&2
295   exit 1
296 fi
297
298 ##find number of interfaces with ip and substitute in VagrantFile
299 if_counter=0
300 for interface in ${output}; do
301
302   if [ "$if_counter" -ge 4 ]; then
303     break
304   fi
305   interface_ip=$(find_ip $interface)
306   if [ ! "$interface_ip" ]; then
307     continue
308   fi
309   new_ip=$(next_usable_ip $interface_ip)
310   if [ ! "$new_ip" ]; then
311     continue
312   fi
313   interface_arr[$interface]=$if_counter
314   interface_ip_arr[$if_counter]=$new_ip
315   subnet_mask=$(find_netmask $interface)
316   if [ "$if_counter" -eq 1 ]; then
317     private_subnet_mask=$subnet_mask
318     private_short_subnet_mask=$(find_short_netmask $interface)
319   fi
320   if [ "$if_counter" -eq 2 ]; then
321     public_subnet_mask=$subnet_mask
322     public_short_subnet_mask=$(find_short_netmask $interface)
323   fi
324   if [ "$if_counter" -eq 3 ]; then
325     storage_subnet_mask=$subnet_mask
326   fi
327   sed -i 's/^.*eth_replace'"$if_counter"'.*$/  config.vm.network "public_network", ip: '\""$new_ip"\"', bridge: '\'"$interface"\'', netmask: '\""$subnet_mask"\"'/' Vagrantfile
328   ((if_counter++))
329 done
330
331 ##now remove interface config in Vagrantfile for 1 node
332 ##if 1, 3, or 4 interfaces set deployment type
333 ##if 2 interfaces remove 2nd interface and set deployment type
334 if [ "$if_counter" == 1 ]; then
335   deployment_type="single_network"
336   remove_vagrant_network eth_replace1
337   remove_vagrant_network eth_replace2
338   remove_vagrant_network eth_replace3
339 elif [ "$if_counter" == 2 ]; then
340   deployment_type="single_network"
341   second_interface=`echo $output | awk '{print $2}'`
342   remove_vagrant_network $second_interface
343   remove_vagrant_network eth_replace2
344 elif [ "$if_counter" == 3 ]; then
345   deployment_type="three_network"
346   remove_vagrant_network eth_replace3
347 else
348   deployment_type="multi_network"
349 fi
350
351 echo "${blue}Network detected: ${deployment_type}! ${reset}"
352
353 if route | grep default; then
354   echo "${blue}Default Gateway Detected ${reset}"
355   host_default_gw=$(ip route | grep default | awk '{print $3}')
356   echo "${blue}Default Gateway: $host_default_gw ${reset}"
357   default_gw_interface=$(ip route get $host_default_gw | awk '{print $3}')
358   case "${interface_arr[$default_gw_interface]}" in
359            0)
360              echo "${blue}Default Gateway Detected on Admin Interface!${reset}"
361              sed -i 's/^.*default_gw =.*$/  default_gw = '\""$host_default_gw"\"'/' Vagrantfile
362              node_default_gw=$host_default_gw
363              ;;
364            1)
365              echo "${red}Default Gateway Detected on Private Interface!${reset}"
366              echo "${red}Private subnet should be private and not have Internet access!${reset}"
367              exit 1
368              ;;
369            2)
370              echo "${blue}Default Gateway Detected on Public Interface!${reset}"
371              sed -i 's/^.*default_gw =.*$/  default_gw = '\""$host_default_gw"\"'/' Vagrantfile
372              echo "${blue}Will setup NAT from Admin -> Public Network on VM!${reset}"
373              sed -i 's/^.*nat_flag =.*$/  nat_flag = true/' Vagrantfile
374              echo "${blue}Setting node gateway to be VM Admin IP${reset}"
375              node_default_gw=${interface_ip_arr[0]}
376              public_gateway=$default_gw
377              ;;
378            3)
379              echo "${red}Default Gateway Detected on Storage Interface!${reset}"
380              echo "${red}Storage subnet should be private and not have Internet access!${reset}"
381              exit 1
382              ;;
383            *)
384              echo "${red}Unable to determine which interface default gateway is on..Exiting!${reset}"
385              exit 1
386              ;;
387   esac
388 else
389   #assumes 24 bit mask
390   defaultgw=`echo ${interface_ip_arr[0]} | cut -d. -f1-3`
391   firstip=.1
392   defaultgw=$defaultgw$firstip
393   echo "${blue}Unable to find default gateway.  Assuming it is $defaultgw ${reset}"
394   sed -i 's/^.*default_gw =.*$/  default_gw = '\""$defaultgw"\"'/' Vagrantfile
395   node_default_gw=$defaultgw
396 fi
397
398 if [ $base_config ]; then
399   if ! cp -f $base_config opnfv_ksgen_settings.yml; then
400     echo "{red}ERROR: Unable to copy $base_config to opnfv_ksgen_settings.yml${reset}"
401     exit 1
402   fi
403 fi
404
405 if [ $no_parse ]; then
406 echo "${blue}Skipping parsing variables into settings file as no_parse flag is set${reset}"
407
408 else
409
410 echo "${blue}Gathering network parameters for Target System...this may take a few minutes${reset}"
411 ##Edit the ksgen settings appropriately
412 ##ksgen settings will be stored in /vagrant on the vagrant machine
413 ##if single node deployment all the variables will have the same ip
414 ##interface names will be enp0s3, enp0s8, enp0s9 in chef/centos7
415
416 sed -i 's/^.*default_gw:.*$/default_gw:'" $node_default_gw"'/' opnfv_ksgen_settings.yml
417
418 ##replace private interface parameter
419 ##private interface will be of hosts, so we need to know the provisioned host interface name
420 ##we add biosdevname=0, net.ifnames=0 to the kickstart to use regular interface naming convention on hosts
421 ##replace IP for parameters with next IP that will be given to controller
422 if [ "$deployment_type" == "single_network" ]; then
423   ##we also need to assign IP addresses to nodes
424   ##for single node, foreman is managing the single network, so we can't reserve them
425   ##not supporting single network anymore for now
426   echo "{blue}Single Network type is unsupported right now.  Please check your interface configuration.  Exiting. ${reset}"
427   exit 0
428
429 elif [[ "$deployment_type" == "multi_network" || "$deployment_type" == "three_network" ]]; then
430
431   if [ "$deployment_type" == "three_network" ]; then
432     sed -i 's/^.*network_type:.*$/network_type: three_network/' opnfv_ksgen_settings.yml
433   fi
434
435   sed -i 's/^.*deployment_type:.*$/  deployment_type: '"$deployment_type"'/' opnfv_ksgen_settings.yml
436
437   ##get ip addresses for private network on controllers to make dhcp entries
438   ##required for controllers_ip_array global param
439   next_private_ip=${interface_ip_arr[1]}
440   type=_private
441   for node in controller1 controller2 controller3; do
442     next_private_ip=$(next_usable_ip $next_private_ip)
443     if [ ! "$next_private_ip" ]; then
444        printf '%s\n' 'deploy.sh: Unable to find next ip for private network for control nodes' >&2
445        exit 1
446     fi
447     sed -i 's/'"$node$type"'/'"$next_private_ip"'/g' opnfv_ksgen_settings.yml
448     controller_ip_array=$controller_ip_array$next_private_ip,
449   done
450
451   ##replace global param for contollers_ip_array
452   controller_ip_array=${controller_ip_array%?}
453   sed -i 's/^.*controllers_ip_array:.*$/  controllers_ip_array: '"$controller_ip_array"'/' opnfv_ksgen_settings.yml
454
455   ##now replace all the VIP variables.  admin//private can be the same IP
456   ##we have to use IP's here that won't be allocated to hosts at provisioning time
457   ##therefore we increment the ip by 10 to make sure we have a safe buffer
458   next_private_ip=$(increment_ip $next_private_ip 10)
459
460   grep -E '*private_vip|loadbalancer_vip|db_vip|amqp_vip|*admin_vip' opnfv_ksgen_settings.yml | while read -r line ; do
461     sed -i 's/^.*'"$line"'.*$/  '"$line $next_private_ip"'/' opnfv_ksgen_settings.yml
462     next_private_ip=$(next_usable_ip $next_private_ip)
463     if [ ! "$next_private_ip" ]; then
464        printf '%s\n' 'deploy.sh: Unable to find next ip for private network for vip replacement' >&2
465        exit 1
466     fi
467   done
468
469   ##replace foreman site
470   next_public_ip=${interface_ip_arr[2]}
471   sed -i 's/^.*foreman_url:.*$/  foreman_url:'" https:\/\/$next_public_ip"'\/api\/v2\//' opnfv_ksgen_settings.yml
472   ##replace public vips
473   next_public_ip=$(increment_ip $next_public_ip 10)
474   grep -E '*public_vip' opnfv_ksgen_settings.yml | while read -r line ; do
475     sed -i 's/^.*'"$line"'.*$/  '"$line $next_public_ip"'/' opnfv_ksgen_settings.yml
476     next_public_ip=$(next_usable_ip $next_public_ip)
477     if [ ! "$next_public_ip" ]; then
478        printf '%s\n' 'deploy.sh: Unable to find next ip for public network for vip replcement' >&2
479        exit 1
480     fi
481   done
482
483   ##replace public_network param
484   public_subnet=$(find_subnet $next_public_ip $public_subnet_mask)
485   sed -i 's/^.*public_network:.*$/  public_network:'" $public_subnet"'/' opnfv_ksgen_settings.yml
486   ##replace private_network param
487   private_subnet=$(find_subnet $next_private_ip $private_subnet_mask)
488   sed -i 's/^.*private_network:.*$/  private_network:'" $private_subnet"'/' opnfv_ksgen_settings.yml
489   ##replace storage_network
490   if [ "$deployment_type" == "three_network" ]; then
491     sed -i 's/^.*storage_network:.*$/  storage_network:'" $private_subnet"'/' opnfv_ksgen_settings.yml
492   else
493     next_storage_ip=${interface_ip_arr[3]}
494     storage_subnet=$(find_subnet $next_storage_ip $storage_subnet_mask)
495     sed -i 's/^.*storage_network:.*$/  storage_network:'" $storage_subnet"'/' opnfv_ksgen_settings.yml
496   fi
497
498   ##replace public_subnet param
499   public_subnet=$public_subnet'\'$public_short_subnet_mask
500   sed -i 's/^.*public_subnet:.*$/  public_subnet:'" $public_subnet"'/' opnfv_ksgen_settings.yml
501   ##replace private_subnet param
502   private_subnet=$private_subnet'\'$private_short_subnet_mask
503   sed -i 's/^.*private_subnet:.*$/  private_subnet:'" $private_subnet"'/' opnfv_ksgen_settings.yml
504
505   ##replace public_dns param to be foreman server
506   sed -i 's/^.*public_dns:.*$/  public_dns: '${interface_ip_arr[2]}'/' opnfv_ksgen_settings.yml
507
508   ##replace public_gateway
509   if [ -z "$public_gateway" ]; then
510     ##if unset then we assume its the first IP in the public subnet
511     public_subnet=$(find_subnet $next_public_ip $public_subnet_mask)
512     public_gateway=$(increment_subnet $public_subnet 1)
513   fi
514   sed -i 's/^.*public_gateway:.*$/  public_gateway:'" $public_gateway"'/' opnfv_ksgen_settings.yml
515
516   ##we have to define an allocation range of the public subnet to give
517   ##to neutron to use as floating IPs
518   ##we should control this subnet, so this range should work .150-200
519   ##but generally this is a bad idea and we are assuming at least a /24 subnet here
520   public_subnet=$(find_subnet $next_public_ip $public_subnet_mask)
521   public_allocation_start=$(increment_subnet $public_subnet 150)
522   public_allocation_end=$(increment_subnet $public_subnet 200)
523
524   sed -i 's/^.*public_allocation_start:.*$/  public_allocation_start:'" $public_allocation_start"'/' opnfv_ksgen_settings.yml
525   sed -i 's/^.*public_allocation_end:.*$/  public_allocation_end:'" $public_allocation_end"'/' opnfv_ksgen_settings.yml
526
527 else
528   printf '%s\n' 'deploy.sh: Unknown network type: $deployment_type' >&2
529   exit 1
530 fi
531
532 echo "${blue}Parameters Complete.  Settings have been set for Foreman. ${reset}"
533
534 fi
535
536 if [ $virtual ]; then
537   echo "${blue} Virtual flag detected, setting Khaleesi playbook to be opnfv-vm.yml ${reset}"
538   sed -i 's/opnfv.yml/opnfv-vm.yml/' bootstrap.sh
539 fi
540
541 echo "${blue}Starting Vagrant! ${reset}"
542
543 ##stand up vagrant
544 if ! vagrant up; then
545   printf '%s\n' 'deploy.sh: Unable to start vagrant' >&2
546   exit 1
547 else
548   echo "${blue}Foreman VM is up! ${reset}"
549 fi
550
551 if [ $virtual ]; then
552
553 ##Bring up VM nodes
554 echo "${blue}Setting VMs up... ${reset}"
555 nodes=`sed -nr '/nodes:/{:start /workaround/!{N;b start};//p}' opnfv_ksgen_settings.yml | sed -n '/^  [A-Za-z0-9]\+:$/p' | sed 's/\s*//g' | sed 's/://g'`
556 ##due to ODL Helium bug of OVS connecting to ODL too early, we need controllers to install first
557 ##this is fix kind of assumes more than I would like to, but for now it should be OK as we always have
558 ##3 static controllers
559 compute_nodes=`echo $nodes | tr " " "\n" | grep -v controller | tr "\n" " "`
560 controller_nodes=`echo $nodes | tr " " "\n" | grep controller | tr "\n" " "`
561 nodes=${controller_nodes}${compute_nodes}
562
563 for node in ${nodes}; do
564   cd /tmp
565
566   ##remove VM nodes incase it wasn't cleaned up
567   rm -rf /tmp/$node
568
569   ##clone bgs vagrant
570   ##will change this to be opnfv repo when commit is done
571   if ! git clone -b v1.0 https://github.com/trozet/bgs_vagrant.git $node; then
572     printf '%s\n' 'deploy.sh: Unable to clone vagrant repo' >&2
573     exit 1
574   fi
575
576   cd $node
577
578   if [ $base_config ]; then
579     if ! cp -f $base_config opnfv_ksgen_settings.yml; then
580       echo "{red}ERROR: Unable to copy $base_config to opnfv_ksgen_settings.yml${reset}"
581       exit 1
582     fi
583   fi
584
585   ##parse yaml into variables
586   eval $(parse_yaml opnfv_ksgen_settings.yml "config_")
587   ##find node type
588   node_type=config_nodes_${node}_type
589   node_type=$(eval echo \$$node_type)
590
591   ##find number of interfaces with ip and substitute in VagrantFile
592   output=`ifconfig | grep -E "^[a-zA-Z0-9]+:"| grep -Ev "lo|tun|virbr|vboxnet" | awk '{print $1}' | sed 's/://'`
593
594   if [ ! "$output" ]; then
595     printf '%s\n' 'deploy.sh: Unable to detect interfaces to bridge to' >&2
596     exit 1
597   fi
598
599
600   if_counter=0
601   for interface in ${output}; do
602
603     if [ "$if_counter" -ge 4 ]; then
604       break
605     fi
606     interface_ip=$(find_ip $interface)
607     if [ ! "$interface_ip" ]; then
608       continue
609     fi
610     case "${if_counter}" in
611            0)
612              mac_string=config_nodes_${node}_mac_address
613              mac_addr=$(eval echo \$$mac_string)
614              mac_addr=$(echo $mac_addr | sed 's/:\|-//g')
615              if [ $mac_addr == "" ]; then
616                  echo "${red} Unable to find mac_address for $node! ${reset}"
617                  exit 1
618              fi
619              ;;
620            1)
621              if [ "$node_type" == "controller" ]; then
622                mac_string=config_nodes_${node}_private_mac
623                mac_addr=$(eval echo \$$mac_string)
624                if [ $mac_addr == "" ]; then
625                  echo "${red} Unable to find private_mac for $node! ${reset}"
626                  exit 1
627                fi
628              else
629                ##generate random mac
630                mac_addr=$(echo -n 00-60-2F; dd bs=1 count=3 if=/dev/random 2>/dev/null |hexdump -v -e '/1 "-%02X"')
631              fi
632              mac_addr=$(echo $mac_addr | sed 's/:\|-//g')
633              ;;
634            *)
635              mac_addr=$(echo -n 00-60-2F; dd bs=1 count=3 if=/dev/random 2>/dev/null |hexdump -v -e '/1 "-%02X"')
636              mac_addr=$(echo $mac_addr | sed 's/:\|-//g')
637              ;;
638     esac
639     sed -i 's/^.*eth_replace'"$if_counter"'.*$/  config.vm.network "public_network", bridge: '\'"$interface"\'', :mac => '\""$mac_addr"\"'/' Vagrantfile
640     ((if_counter++))
641   done
642
643   ##now remove interface config in Vagrantfile for 1 node
644   ##if 1, 3, or 4 interfaces set deployment type
645   ##if 2 interfaces remove 2nd interface and set deployment type
646   if [ "$if_counter" == 1 ]; then
647     deployment_type="single_network"
648     remove_vagrant_network eth_replace1
649     remove_vagrant_network eth_replace2
650     remove_vagrant_network eth_replace3
651   elif [ "$if_counter" == 2 ]; then
652     deployment_type="single_network"
653     second_interface=`echo $output | awk '{print $2}'`
654     remove_vagrant_network $second_interface
655     remove_vagrant_network eth_replace2
656   elif [ "$if_counter" == 3 ]; then
657     deployment_type="three_network"
658     remove_vagrant_network eth_replace3
659   else
660     deployment_type="multi_network"
661   fi
662
663   ##modify provisioning to do puppet install, config, and foreman check-in
664   ##substitute host_name and dns_server in the provisioning script
665   host_string=config_nodes_${node}_hostname
666   host_name=$(eval echo \$$host_string)
667   sed -i 's/^host_name=REPLACE/host_name='$host_name'/' vm_nodes_provision.sh
668   ##dns server should be the foreman server
669   sed -i 's/^dns_server=REPLACE/dns_server='${interface_ip_arr[0]}'/' vm_nodes_provision.sh
670
671   ## remove bootstrap and NAT provisioning
672   sed -i '/nat_setup.sh/d' Vagrantfile
673   sed -i 's/bootstrap.sh/vm_nodes_provision.sh/' Vagrantfile
674
675   ## modify default_gw to be node_default_gw
676   sed -i 's/^.*default_gw =.*$/  default_gw = '\""$node_default_gw"\"'/' Vagrantfile
677
678   ## modify VM memory to be 4gig
679   sed -i 's/^.*vb.memory =.*$/     vb.memory = 4096/' Vagrantfile
680
681   echo "${blue}Starting Vagrant Node $node! ${reset}"
682
683   ##stand up vagrant
684   if ! vagrant up; then
685     echo "${red} Unable to start $node ${reset}"
686     exit 1
687   else
688     echo "${blue} $node VM is up! ${reset}"
689   fi
690
691 done
692
693  echo "${blue} All VMs are UP! ${reset}"
694
695 fi