build/instack.sh

   1 #!/bin/sh
   2 set -e
   3 declare -i CNT
   4
   5 RDO_RELEASE=kilo
   6 SSH_OPTIONS=(-o StrictHostKeyChecking=no -o GlobalKnownHostsFile=/dev/null -o UserKnownHostsFile=/dev/null)
   7
   8 # check for dependancy packages
   9 for i in libguestfs-tools; do
  10     if ! rpm -q $i > /dev/null; then
  11         sudo yum install -y $i
  12     fi
  13 done
  14
  15 # RDO Manager expects a stack user to exist, this checks for one
  16 # and creates it if you are root
  17 if ! id stack > /dev/null; then
  18     sudo useradd stack;
  19     sudo echo 'stack ALL=(root) NOPASSWD:ALL' | sudo tee -a /etc/sudoers.d/stack
  20     sudo echo 'Defaults:stack !requiretty' | sudo tee -a /etc/sudoers.d/stack
  21     sudo chmod 0440 /etc/sudoers.d/stack
  22     echo 'Added user stack'
  23 fi
  24
  25 # ensure that I can ssh as the stack user
  26 if ! sudo grep "$(cat ~/.ssh/id_rsa.pub)" /home/stack/.ssh/authorized_keys; then
  27     if ! sudo ls -d /home/stack/.ssh/ ; then
  28         sudo mkdir /home/stack/.ssh
  29         sudo chown stack:stack /home/stack/.ssh
  30         sudo chmod 700 /home/stack/.ssh
  31     fi
  32     USER=$(whoami) sudo sh -c "cat ~$USER/.ssh/id_rsa.pub >> /home/stack/.ssh/authorized_keys"
  33     sudo chown stack:stack /home/stack/.ssh/authorized_keys
  34 fi
  35
  36 # clean up stack user previously build instack disk images
  37 ssh -T ${SSH_OPTIONS[@]} stack@localhost "rm -f instack*.qcow2"
  38
  39 # Yum repo setup for building the undercloud
  40 if ! rpm -q epel-release > /dev/null; then
  41     sudo yum install http://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm
  42 fi
  43
  44 if ! rpm -q rdo-release > /dev/null; then
  45     sudo yum install -y https://rdoproject.org/repos/openstack-${RDO_RELEASE}/rdo-release-${RDO_RELEASE}.rpm
  46 fi
  47
  48 if ! rpm -q rdo-release > /dev/null && [ "$1" != "-master" ]; then
  49     sudo yum install -y https://rdoproject.org/repos/openstack-${RDO_RELEASE}/rdo-release-${RDO_RELEASE}.rpm
  50     sudo rm -rf /etc/yum.repos.d/delorean.repo
  51     sudo rm -rf /etc/yum.repos.d/delorean-current.repo
  52     sudo rm -rf /etc/yum.repos.d/delorean-deps.repo
  53 elif [ "$1" == "-master" ]; then
  54     sudo yum -y install yum-plugin-priorities
  55     sudo yum-config-manager --disable openstack-${RDO_RELEASE}
  56     sudo curl -o /etc/yum.repos.d/delorean.repo http://trunk.rdoproject.org/centos7-liberty/current-passed-ci/delorean.repo
  57     sudo curl -o /etc/yum.repos.d/delorean-deps.repo http://trunk.rdoproject.org/centos7-liberty/delorean-deps.repo
  58     sudo rm -f /etc/yum.repos.d/delorean-current.repo
  59
  60 fi
  61
  62 # ensure the undercloud package is installed so we can build the undercloud
  63 if ! rpm -q instack-undercloud > /dev/null; then
  64     sudo yum install -y python-tripleoclient
  65 fi
  66
  67 # ensure openvswitch is installed
  68 if ! rpm -q openvswitch > /dev/null; then
  69     sudo yum install -y openvswitch
  70 fi
  71
  72 # ensure libvirt is installed
  73 if ! rpm -q libvirt-daemon-kvm > /dev/null; then
  74     sudo yum install -y libvirt-daemon-kvm
  75 fi
  76
  77 # ensure that no previous undercloud VMs are running
  78 # and rebuild the bare undercloud VMs
  79 ssh -T ${SSH_OPTIONS[@]} stack@localhost <<EOI
  80 set -e
  81 virsh destroy instack 2> /dev/null || echo -n ''
  82 virsh undefine instack --remove-all-storage 2> /dev/null || echo -n ''
  83 virsh destroy baremetalbrbm_0 2> /dev/null || echo -n ''
  84 virsh undefine baremetalbrbm_0 --remove-all-storage 2> /dev/null || echo -n ''
  85 virsh destroy baremetalbrbm_1 2> /dev/null || echo -n ''
  86 virsh undefine baremetalbrbm_1 --remove-all-storage 2> /dev/null || echo -n ''
  87 NODE_CPU=2 NODE_MEM=8192 instack-virt-setup
  88 EOI
  89
  90 # let dhcp happen so we can get the ip
  91 # just wait instead of checking until we see an address
  92 # because there may be a previous lease that needs
  93 # to be cleaned up
  94 sleep 5
  95
  96 # get the undercloud ip address
  97 UNDERCLOUD=$(grep instack /var/lib/libvirt/dnsmasq/default.leases | awk '{print $3}' | head -n 1)
  98
  99 # ensure that we can ssh to the undercloud
 100 CNT=10
 101 while ! ssh -T ${SSH_OPTIONS[@]}  "root@$UNDERCLOUD" "echo ''" > /dev/null && [ $CNT -gt 0 ]; do
 102     echo -n "."
 103     sleep 3
 104     CNT=CNT-1
 105 done
 106 # TODO fail if CNT=0
 107
 108 # yum repo, triple-o package and ssh key setup for the undercloud
 109 ssh -T ${SSH_OPTIONS[@]} "root@$UNDERCLOUD" <<EOI
 110 set -e
 111 if ! rpm -q epel-release > /dev/null; then
 112     yum install http://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm
 113 fi
 114
 115 yum -y install yum-plugin-priorities
 116 curl -o /etc/yum.repos.d/delorean.repo http://trunk.rdoproject.org/centos7-liberty/current-passed-ci/delorean.repo
 117 curl -o /etc/yum.repos.d/delorean-deps.repo http://trunk.rdoproject.org/centos7-liberty/delorean-deps.repo
 118 yum install -y python-tripleoclient
 119 cp /root/.ssh/authorized_keys /home/stack/.ssh/authorized_keys
 120 chown stack:stack /home/stack/.ssh/authorized_keys
 121 EOI
 122
 123 # install undercloud on Undercloud VM
 124 ssh -T ${SSH_OPTIONS[@]} "stack@$UNDERCLOUD" "openstack undercloud install"
 125
 126 # Clean cache to reduce the images size
 127 ssh -T ${SSH_OPTIONS[@]} "root@$UNDERCLOUD" "yum clean all"
 128
 129 # copy instackenv file for future virt deployments
 130 if [ ! -d stack ]; then mkdir stack; fi
 131 scp ${SSH_OPTIONS[@]} stack@$UNDERCLOUD:instackenv.json stack/instackenv.json
 132
 133 # make a copy of instack VM's definitions, and disk image
 134 # it must be stopped to make a copy of its disk image
 135 ssh -T ${SSH_OPTIONS[@]} stack@localhost <<EOI
 136 set -e
 137 echo "Shutting down instack to take snapshot"
 138 virsh shutdown instack
 139
 140 echo "Waiting for instack VM to shutdown"
 141 CNT=20
 142 while virsh list | grep instack > /dev/null && [ $CNT -gt 0 ]; do
 143     echo -n "."
 144     sleep 5
 145     CNT=CNT-1
 146 done
 147 if virsh list | grep instack > /dev/null; then
 148     echo "instack failed to shutdown for copy"
 149     exit 1
 150 fi
 151
 152 echo "\nCopying instack disk image and starting instack VM."
 153 virsh dumpxml baremetalbrbm_0 > baremetalbrbm_0.xml
 154 virsh dumpxml baremetalbrbm_1 > baremetalbrbm_1.xml
 155 virsh dumpxml instack > instack.xml
 156 #virsh vol-dumpxml instack.qcow2 --pool default > instack.qcow2.xml
 157 virsh net-dumpxml brbm > brbm.xml
 158 EOI
 159
 160 # copy off the instack artifacts
 161 echo "Copying instack files to build directory"
 162 scp ${SSH_OPTIONS[@]} stack@localhost:baremetalbrbm_0.xml .
 163 scp ${SSH_OPTIONS[@]} stack@localhost:baremetalbrbm_1.xml .
 164 scp ${SSH_OPTIONS[@]} stack@localhost:instack.xml .
 165 scp ${SSH_OPTIONS[@]} stack@localhost:brbm.xml .
 166
 167 sudo cp /var/lib/libvirt/images/instack.qcow2 ./instack.qcow2_
 168 sudo chown $(whoami):$(whoami) ./instack.qcow2_
 169 virt-sparsify --check-tmpdir=fail ./instack.qcow2_ ./instack.qcow2
 170 rm -f ./instack.qcow2_
 171
 172 # pull down the the built images
 173 echo "Copying overcloud resources"
 174 IMAGES="deploy-ramdisk-ironic.initramfs deploy-ramdisk-ironic.kernel"
 175 IMAGES+=" ironic-python-agent.initramfs ironic-python-agent.kernel ironic-python-agent.vmlinuz"
 176 IMAGES+=" overcloud-full.initrd overcloud-full.qcow2  overcloud-full.vmlinuz"
 177
 178 for i in $IMAGES; do
 179   # download prebuilt images from RDO Project
 180   curl https://repos.fedorapeople.org/repos/openstack-m/rdo-images-centos-liberty/$i -z stack/$i -o stack/$i --verbose --silent --location
 181 done
 182
 183 # move and Sanitize private keys from instack.json file
 184 mv stack/instackenv.json instackenv-virt.json
 185 sed -i '/pm_password/c\      "pm_password": "INSERT_STACK_USER_PRIV_KEY",' instackenv-virt.json
 186 sed -i '/ssh-key/c\  "ssh-key": "INSERT_STACK_USER_PRIV_KEY",' instackenv-virt.json
 187
 188 # clean up the VMs
 189 ssh -T ${SSH_OPTIONS[@]} stack@localhost <<EOI
 190 set -e
 191 virsh destroy instack 2> /dev/null || echo -n ''
 192 virsh undefine instack --remove-all-storage 2> /dev/null || echo -n ''
 193 virsh destroy baremetalbrbm_0 2> /dev/null || echo -n ''
 194 virsh undefine baremetalbrbm_0 --remove-all-storage 2> /dev/null || echo -n ''
 195 virsh destroy baremetalbrbm_1 2> /dev/null || echo -n ''
 196 virsh undefine baremetalbrbm_1 --remove-all-storage 2> /dev/null || echo -n ''
 197 EOI
 198