mcp/scripts/salt.sh

   1 #!/bin/bash -e
   2 ##############################################################################
   3 # Copyright (c) 2017 Mirantis Inc., Enea AB and others.
   4 # All rights reserved. This program and the accompanying materials
   5 # are made available under the terms of the Apache License, Version 2.0
   6 # which accompanies this distribution, and is available at
   7 # http://www.apache.org/licenses/LICENSE-2.0
   8 ##############################################################################
   9 #
  10 # Deploy Salt Master
  11 #
  12
  13 CI_DEBUG=${CI_DEBUG:-0}; [[ "${CI_DEBUG}" =~ (false|0) ]] || set -x
  14 F_GIT_ROOT=$(git rev-parse --show-toplevel)
  15 F_GIT_DIR=$(cd "${F_GIT_ROOT}/mcp" && git rev-parse --git-dir)
  16 F_GIT_SUBD=${F_GIT_ROOT#${F_GIT_DIR%%/.git*}}
  17 OPNFV_TMP_DIR="/home/${SALT_MASTER_USER}/opnfv"
  18 OPNFV_GIT_DIR="/root/opnfv"
  19 OPNFV_FUEL_DIR="/root/fuel"
  20 OPNFV_RDIR="reclass/classes/cluster/all-mcp-ocata-common"
  21 LOCAL_GIT_DIR="${F_GIT_ROOT%${F_GIT_SUBD}}"
  22 LOCAL_PDF_RECLASS=$1
  23 NODE_MASK='*'
  24
  25 [[ "${CLUSTER_DOMAIN}" =~ virtual ]] || NODE_MASK='mas01*'
  26
  27 # push to cfg01 current git repo first (including submodules), at ~ubuntu/opnfv
  28 # later we move it to ~root/opnfv (and ln as ~root/fuel); delete the temp clone
  29 remote_tmp="${SSH_SALT}:$(basename "${OPNFV_TMP_DIR}")"
  30 rsync -Erl --delete -e "ssh ${SSH_OPTS}" \
  31   --exclude-from="${F_GIT_ROOT}/.gitignore" \
  32   "${LOCAL_GIT_DIR}/" "${remote_tmp}/"
  33 if [ -n "${LOCAL_PDF_RECLASS}" ] && [ -f "${LOCAL_PDF_RECLASS}" ]; then
  34   rsync -e "ssh ${SSH_OPTS}" "${LOCAL_PDF_RECLASS}" \
  35     "${remote_tmp}${F_GIT_SUBD}/mcp/${OPNFV_RDIR}/opnfv/"
  36 fi
  37
  38 # ssh to cfg01
  39 # shellcheck disable=SC2086,2087
  40 ssh ${SSH_OPTS} "${SSH_SALT}" bash -s -e << SALT_INSTALL_END
  41   sudo -i
  42   set -e
  43   export CI_DEBUG=${CI_DEBUG}; [[ "${CI_DEBUG}" =~ (false|0) ]] || set -x
  44
  45   echo -n 'Checking out cloud-init has finished running ...'
  46   while [ ! -f /var/lib/cloud/instance/boot-finished ]; do echo -n '.'; sleep 1; done
  47   echo ' done'
  48
  49   mkdir -p /srv/salt /usr/share/salt-formulas/reclass
  50   rm -rf ${OPNFV_GIT_DIR}
  51   mv ${OPNFV_TMP_DIR} ${OPNFV_GIT_DIR} && chown -R root.root ${OPNFV_GIT_DIR}
  52   find ${OPNFV_GIT_DIR} -name '.git' -type f | while read f_git; do
  53     sed -i 's@${LOCAL_GIT_DIR}@${OPNFV_GIT_DIR}@g' \$f_git
  54   done
  55   ln -sf ${OPNFV_GIT_DIR}${F_GIT_SUBD} ${OPNFV_FUEL_DIR}
  56   ln -sf ${OPNFV_FUEL_DIR}/mcp/reclass /srv/salt
  57   ln -sf ${OPNFV_FUEL_DIR}/mcp/deploy/scripts /srv/salt
  58   cd /srv/salt/${OPNFV_RDIR} && rm -f arch && ln -sf "\$(uname -i)" arch
  59
  60   cp -r ${OPNFV_FUEL_DIR}/mcp/metadata/service /usr/share/salt-formulas/reclass
  61   cd /srv/salt/reclass/classes/service && \
  62     ln -sf /usr/share/salt-formulas/reclass/service/opendaylight
  63
  64   cd /srv/salt/scripts
  65   export DEBIAN_FRONTEND=noninteractive
  66   OLD_DOMAIN=\$(grep -Pzo "id: cfg01\.\K(\S*)" /etc/salt/minion.d/minion.conf) || true
  67   BOOTSTRAP_SALTSTACK_OPTS=" -r -dX stable 2016.11 " \
  68     MASTER_HOSTNAME=cfg01.${CLUSTER_DOMAIN} DISTRIB_REVISION=nightly \
  69       EXTRA_FORMULAS="nfs" \
  70         ./salt-master-init.sh
  71   salt-key -Ay
  72
  73   cp -r ${OPNFV_FUEL_DIR}/mcp/salt-formulas/* /usr/share/salt-formulas/env
  74   cd ${OPNFV_FUEL_DIR}/mcp/patches && ./patch.sh patches.list formulas
  75   cd ${OPNFV_FUEL_DIR}/mcp/patches && ./patch.sh patches.list reclass
  76
  77   salt-call state.apply salt
  78
  79   # In case scenario changed (and implicitly domain name), re-register minions
  80   if [ -n "\${OLD_DOMAIN}" ] && [ "\${OLD_DOMAIN}" != "${CLUSTER_DOMAIN}" ]; then
  81     salt "*.\${OLD_DOMAIN}" cmd.run "grep \${OLD_DOMAIN} -Rl /etc/salt | \
  82       xargs --no-run-if-empty sed -i 's/\${OLD_DOMAIN}/${CLUSTER_DOMAIN}/g'; \
  83         service salt-minion restart" || true
  84     salt-key -yd "*.\${OLD_DOMAIN}"
  85     salt-key -Ay
  86   fi
  87
  88   # Init specific to VMs on FN (all for virtual, cfg|mas for baremetal)
  89   salt -C "${NODE_MASK} or cfg01*" saltutil.sync_all
  90   salt -C "${NODE_MASK} or cfg01*" state.apply salt | \
  91     grep -Fq 'No response' && salt -C "${NODE_MASK} or cfg01*" state.apply salt
  92
  93   salt -C 'I@salt:master' state.sls linux
  94   salt -C "${NODE_MASK} and not cfg01*" state.sls linux || true
  95   salt -C "${NODE_MASK} and not cfg01*" pkg.upgrade refresh=False
  96
  97   salt -C "${NODE_MASK} or cfg01*" state.sls ntp
  98 SALT_INSTALL_END