tests/run_on_remotenodes.sh

   1 #!/bin/bash -ex
   2
   3 #Copyright 2016 Open Platform for NFV Project, Inc. and its contributors
   4 #   Licensed under the Apache License, Version 2.0 (the "License");
   5 #   you may not use this file except in compliance with the License.
   6 #   You may obtain a copy of the License at
   7 #       http://www.apache.org/licenses/LICENSE-2.0
   8 #   Unless required by applicable law or agreed to in writing, software
   9 #   distributed under the License is distributed on an "AS IS" BASIS,
  10 #   WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  11 #   See the License for the specific language governing permissions and
  12 #   limitations under the License.
  13
  14 IS_IPandKEY_CONFIGURED=true
  15 USERNAME=ubuntu
  16 #SSH_KEY_PATH=/home/opnfv/repos/domino/tests/testkeys/id_rsa
  17 #DOMINO_CODE_PATH=/home/opnfv/repos/domino
  18 SSH_KEY_PATH=./tests/testkeys/id_rsa
  19 DOMINO_CODE_PATH=../domino
  20 CONTROLLER_NODE_1=192.168.2.165
  21 CONTROLLER_NODE_2=192.168.2.180
  22 CONTROLLER_NODE_3=192.168.2.181
  23
  24 CLIENT1_PORT=9091
  25 CLIENT2_PORT=9092
  26 CLIENT1_CLIPORT=9100
  27 CLIENT2_CLIPORT=9200
  28 LOGLEVEL=DEBUG
  29
  30 toscafile_test1=./tosca-templates/tosca_helloworld_nfv.yaml
  31 test1_reffile1=./tests/refdata/test1_client1.ref
  32 test1_reffile2=./tests/refdata/test1_client2.ref
  33 client1_log=./tests/logdata/client1.log
  34 client2_log=./tests/logdata/client2.log
  35 server_log=./tests/logdata/server.log
  36 ssh_opts="-o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no"
  37
  38 install_dependency() {
  39   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" 'sudo pip install tosca-parser'
  40   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" 'sudo pip install heat-translator'
  41   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" 'sudo pip install tosca-parser'
  42   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" 'sudo pip install heat-translator'
  43   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" 'sudo pip install tosca-parser'
  44   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" 'sudo pip install heat-translator'
  45 }
  46
  47 remove_codes(){
  48   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" 'rm -rf domino'
  49   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" 'rm -rf domino'
  50   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" 'rm -rf domino'
  51 }
  52
  53 deploy_codes(){
  54   scp $ssh_opts -i "$SSH_KEY_PATH" -r "$DOMINO_CODE_PATH" "$USERNAME"@"$CONTROLLER_NODE_1":.
  55   scp $ssh_opts -i "$SSH_KEY_PATH" -r "$DOMINO_CODE_PATH" "$USERNAME"@"$CONTROLLER_NODE_2":.
  56   scp $ssh_opts -i "$SSH_KEY_PATH" -r "$DOMINO_CODE_PATH" "$USERNAME"@"$CONTROLLER_NODE_3":.
  57 }
  58
  59 start_server() {
  60   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" 'pgrep -f "python DominoServer.py"' && return 0
  61   ssh $ssh_opts -f -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" "sh -c 'cd ./domino; nohup python DominoServer.py --log "$LOGLEVEL" > "$server_log" > /dev/null 2>&1 &'"
  62 }
  63
  64 start_client1() {
  65   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" 'pgrep -f "python DominoClient.py"' && return 0
  66   ssh $ssh_opts -f -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd ./domino; nohup python DominoClient.py -p $CLIENT1_PORT --cliport $CLIENT1_CLIPORT --ipaddr $CONTROLLER_NODE_1 --log "$LOGLEVEL" > "$client1_log" > /dev/null 2>&1 &'"
  67 }
  68
  69 start_client2() {
  70   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" 'pgrep -f "python DominoClient.py"' && return 0
  71   ssh $ssh_opts -f -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" "sh -c 'cd ./domino; nohup python DominoClient.py -p $CLIENT2_PORT --cliport $CLIENT2_CLIPORT --ipaddr $CONTROLLER_NODE_1 --log "$LOGLEVEL" > "$client2_log" > /dev/null 2>&1 &'"
  72 }
  73
  74 stop_server() {
  75   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" 'pgrep -f "python DominoServer.py"' || return 0
  76   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_1" 'kill $(pgrep -f "python DominoServer.py")'
  77 }
  78
  79 stop_client1() {
  80   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" 'pgrep -f "python DominoClient.py"' || return 0
  81   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" 'kill $(pgrep -f "python DominoClient.py")'
  82 }
  83
  84 stop_client2() {
  85   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" 'pgrep -f "python DominoClient.py"' || return 0
  86   ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" 'kill $(pgrep -f "python DominoClient.py")'
  87 }
  88
  89 cleanup() {
  90   chmod 600 "$SSH_KEY_PATH"
  91   set +e
  92   echo "cleanup..."
  93
  94   echo "Stopping Domino Clients..."
  95   stop_client1
  96   sleep 1
  97   stop_client2
  98   sleep 1
  99
 100   echo "Stopping Domino Server..."
 101   stop_server
 102   sleep 1
 103 }
 104
 105 prepare_testenv() {
 106   chmod 600 "$SSH_KEY_PATH"
 107   install_dependency
 108   remove_codes
 109   deploy_codes
 110 }
 111
 112 launch_domino() {
 113   echo "Launching Domino Server..."
 114   start_server
 115   sleep 1
 116   echo "Launching Domino Client 1..."
 117   start_client1
 118   sleep 1
 119   echo "Launching Domino Client 2..."
 120   start_client2
 121   sleep 1
 122 }
 123
 124 echo "domino/tests/run_multinode.sh has been executed."
 125
 126 if [ "$IS_IPandKEY_CONFIGURED" = "true" ]; then
 127     trap cleanup EXIT
 128
 129     cleanup
 130     prepare_testenv
 131     launch_domino
 132
 133
 134     echo "Test Heartbeat"
 135     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT heartbeat'"
 136     sleep 1
 137
 138     echo "Test Subscribe API"
 139     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -t hot -l tosca.policies.Placement:properties:region:nova-1'"
 140     sleep 1
 141     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -t dummy1,dummy2 --top OVERWRITE'"
 142     sleep 1
 143     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -t dummy1,dummy2 --top DELETE'"
 144     sleep 1
 145     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -l tosca.policies.Placement:properties:region:nova-2'"
 146     sleep 1
 147     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -l tosca.policies.Placement:properties:region:nova-3 --lop OVERWRITE'"
 148     sleep 1
 149     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -l tosca.policies.Placement:properties:region:nova-3 --lop DELETE'"
 150     sleep 1
 151
 152     echo "Test Publish API"
 153     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" "sh -c 'cd domino; python domino_cli.py $CLIENT2_CLIPORT publish -t "$toscafile_test1"'"
 154
 155     sleep 1
 156     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_2" "sh -c 'cd domino; python domino_cli.py $CLIENT1_CLIPORT subscribe -l tosca.policies.Placement.Geolocation:properties:region:us-west-1'"
 157     sleep 1
 158     ssh $ssh_opts -i "$SSH_KEY_PATH" "$USERNAME"@"$CONTROLLER_NODE_3" "sh -c 'cd domino; python domino_cli.py $CLIENT2_CLIPORT publish -t "$toscafile_test1"'"
 159
 160     echo "done"
 161
 162 else
 163
 164     echo "set IS_IPandKEY_CONFIGURED as true to run the test"
 165
 166 fi
 167
 168