test/auto-test/FTC800.sh

   1 #!/bin/bash
   2
   3 #  ============LICENSE_START===============================================
   4 #  Copyright (C) 2020 Nordix Foundation. All rights reserved.
   5 #  ========================================================================
   6 #  Licensed under the Apache License, Version 2.0 (the "License");
   7 #  you may not use this file except in compliance with the License.
   8 #  You may obtain a copy of the License at
   9 #
  10 #       http://www.apache.org/licenses/LICENSE-2.0
  11 #
  12 #  Unless required by applicable law or agreed to in writing, software
  13 #  distributed under the License is distributed on an "AS IS" BASIS,
  14 #  WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  15 #  See the License for the specific language governing permissions and
  16 #  limitations under the License.
  17 #  ============LICENSE_END=================================================
  18 #
  19
  20 TC_ONELINE_DESCR="Create 10000 policies in sequence using http/https and Agent REST/DMAAP with/without SDNC controller"
  21
  22 #App names to include in the test when running docker, space separated list
  23 DOCKER_INCLUDED_IMAGES="CBS CONSUL CP CR MR PA RICSIM SDNC NGW"
  24
  25 #App names to include in the test when running kubernetes, space separated list
  26 KUBE_INCLUDED_IMAGES="CP CR MR PA RICSIM SDNC KUBEPROXY NGW"
  27 #Prestarted app (not started by script) to include in the test when running kubernetes, space separated list
  28 KUBE_PRESTARTED_IMAGES=""
  29
  30 #Ignore image in DOCKER_INCLUDED_IMAGES, KUBE_INCLUDED_IMAGES if
  31 #the image is not configured in the supplied env_file
  32 #Used for images not applicable to all supported profile
  33 CONDITIONALLY_IGNORED_IMAGES="NGW"
  34
  35 #Supported test environment profiles
  36 SUPPORTED_PROFILES="ONAP-GUILIN ONAP-HONOLULU ONAP-ISTANBUL ORAN-CHERRY ORAN-D-RELEASE"
  37 #Supported run modes
  38 SUPPORTED_RUNMODES="DOCKER KUBE"
  39
  40 . ../common/testcase_common.sh  $@
  41 . ../common/agent_api_functions.sh
  42 . ../common/ricsimulator_api_functions.sh
  43 . ../common/cr_api_functions.sh
  44 . ../common/mr_api_functions.sh
  45 . ../common/control_panel_api_functions.sh
  46 . ../common/controller_api_functions.sh
  47 . ../common/consul_cbs_functions.sh
  48 . ../common/kube_proxy_api_functions.sh
  49 . ../common/gateway_api_functions.sh
  50
  51 setup_testenvironment
  52
  53 #### TEST BEGIN ####
  54
  55 generate_policy_uuid
  56
  57 #Local vars in test script
  58 ##########################
  59 # Number of policies in each sequence
  60 NUM_POLICIES=10000
  61
  62 # Tested variants of REST/DMAAP/SDNC config
  63 TESTED_VARIANTS="NOSDNC   SDNC"
  64
  65 #Test agent and simulator protocol versions (others are http only)
  66 TESTED_PROTOCOLS="HTTP HTTPS"
  67
  68 for __httpx in $TESTED_PROTOCOLS ; do
  69     for interface in $TESTED_VARIANTS ; do
  70
  71         echo "#####################################################################"
  72         echo "#####################################################################"
  73         echo "### Testing agent via $interface using $__httpx"
  74         echo "#####################################################################"
  75         echo "#####################################################################"
  76
  77         if [ $__httpx == "HTTPS" ]; then
  78             use_cr_https
  79             use_simulator_https
  80             use_mr_https
  81             use_agent_rest_https
  82         else
  83             use_cr_http
  84             use_simulator_http
  85             use_mr_http
  86             use_agent_rest_http
  87         fi
  88
  89         # Policy instance start id
  90         START_ID=1
  91
  92         clean_environment
  93
  94         if [ $RUNMODE == "KUBE" ]; then
  95             start_kube_proxy
  96         fi
  97
  98         start_ric_simulators ricsim_g1 1 OSC_2.1.0
  99         start_ric_simulators ricsim_g2 1 STD_1.1.3
 100         if [ "$PMS_VERSION" == "V2" ]; then
 101             start_ric_simulators ricsim_g3 1  STD_2.0.0
 102         fi
 103
 104         start_mr
 105
 106         start_cr
 107
 108         start_control_panel $SIM_GROUP/$CONTROL_PANEL_COMPOSE_DIR/$CONTROL_PANEL_CONFIG_FILE
 109
 110         if [ ! -z "$NRT_GATEWAY_APP_NAME" ]; then
 111             start_gateway $SIM_GROUP/$NRT_GATEWAY_COMPOSE_DIR/$NRT_GATEWAY_CONFIG_FILE
 112         fi
 113
 114         start_policy_agent NORPOXY $SIM_GROUP/$POLICY_AGENT_COMPOSE_DIR/$POLICY_AGENT_CONFIG_FILE
 115
 116         set_agent_debug
 117
 118         mr_equal requests_submitted 0
 119
 120         if [[ $interface == "SDNC" ]]; then
 121             start_sdnc
 122             prepare_consul_config      SDNC    ".consul_config.json"
 123         else
 124             prepare_consul_config      NOSDNC  ".consul_config.json"
 125         fi
 126
 127         if [ $RUNMODE == "DOCKER" ]; then
 128             start_consul_cbs
 129         fi
 130
 131         if [ $RUNMODE == "KUBE" ]; then
 132             agent_load_config                       ".consul_config.json"
 133         else
 134             consul_config_app                      ".consul_config.json"
 135         fi
 136
 137
 138         api_get_status 200
 139
 140         sim_print ricsim_g1_1 interface
 141         sim_print ricsim_g2_1 interface
 142         if [ "$PMS_VERSION" == "V2" ]; then
 143             sim_print ricsim_g3_1 interface
 144         fi
 145
 146         sim_put_policy_type 201 ricsim_g1_1 1 testdata/OSC/sim_1.json
 147
 148         if [ "$PMS_VERSION" == "V2" ]; then
 149             sim_put_policy_type 201 ricsim_g3_1 STD_QOS2_0.1.0 testdata/STD2/sim_qos2.json
 150
 151             api_equal json:policy-types 3 300  #Wait for the agent to refresh types from the simulators
 152         else
 153             api_equal json:policy_types 2 300  #Wait for the agent to refresh types from the simulators
 154         fi
 155
 156         api_put_service 201 "serv1" 3600 "$CR_SERVICE_PATH/1"
 157
 158         if [ "$PMS_VERSION" == "V2" ]; then
 159             notificationurl=$CR_SERVICE_PATH"/test"
 160         else
 161             notificationurl=""
 162         fi
 163
 164         start_timer "Create polices in OSC via agent REST and $interface using "$__httpx
 165         api_put_policy 201 "serv1" ricsim_g1_1 1 $START_ID NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json $NUM_POLICIES
 166         print_timer "Create polices in OSC via agent REST and $interface using "$__httpx
 167
 168         sim_equal ricsim_g1_1 num_instances $NUM_POLICIES
 169
 170         START_ID=$(($START_ID+$NUM_POLICIES))
 171
 172         start_timer "Create polices in STD via agent REST and $interface using "$__httpx
 173         api_put_policy 201 "serv1" ricsim_g2_1 NOTYPE $START_ID NOTRANSIENT $notificationurl testdata/STD/pi1_template.json $NUM_POLICIES
 174         print_timer "Create polices in STD via agent REST and $interface using "$__httpx
 175
 176         sim_equal ricsim_g2_1 num_instances $NUM_POLICIES
 177
 178         if [ "$PMS_VERSION" == "V2" ]; then
 179
 180             START_ID=$(($START_ID+$NUM_POLICIES))
 181
 182             start_timer "Create polices in STD 2 via agent REST and $interface using "$__httpx
 183             api_put_policy 201 "serv1" ricsim_g3_1 STD_QOS2_0.1.0 $START_ID NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json $NUM_POLICIES
 184             print_timer "Create polices in STD via agent REST and $interface using "$__httpx
 185
 186             sim_equal ricsim_g3_1 num_instances $NUM_POLICIES
 187         fi
 188
 189         if [ $__httpx == "HTTPS" ]; then
 190             echo "Using secure ports towards dmaap"
 191             use_agent_dmaap_https
 192         else
 193             echo "Using non-secure ports towards dmaap"
 194             use_agent_dmaap_http
 195         fi
 196
 197         START_ID=$(($START_ID+$NUM_POLICIES))
 198
 199         start_timer "Create polices in OSC via agent DMAAP, one by one, and $interface using "$__httpx
 200         api_put_policy 201 "serv1" ricsim_g1_1 1 $START_ID NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json $NUM_POLICIES
 201         print_timer "Create polices in OSC via agent DMAAP, one by one, and $interface using "$__httpx
 202
 203         sim_equal ricsim_g1_1 num_instances $((2*$NUM_POLICIES))
 204
 205         START_ID=$(($START_ID+$NUM_POLICIES))
 206
 207         start_timer "Create polices in STD via agent DMAAP, one by one, and $interface using "$__httpx
 208         api_put_policy 201 "serv1" ricsim_g2_1 NOTYPE $START_ID NOTRANSIENT $notificationurl testdata/STD/pi1_template.json $NUM_POLICIES
 209         print_timer "Create polices in STD via agent DMAAP, one by one, and $interface using "$__httpx
 210
 211         sim_equal ricsim_g2_1 num_instances $((2*$NUM_POLICIES))
 212
 213         if [ "$PMS_VERSION" == "V2" ]; then
 214
 215             START_ID=$(($START_ID+$NUM_POLICIES))
 216
 217             start_timer "Create polices in STD 2 via agent DMAAP, one by one, and $interface using "$__httpx
 218             api_put_policy 201 "serv1" ricsim_g3_1 STD_QOS2_0.1.0 $START_ID NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json $NUM_POLICIES
 219             print_timer "Create polices in STD via agent DMAAP, one by one, and $interface using "$__httpx
 220
 221             sim_equal ricsim_g3_1 num_instances $((2*$NUM_POLICIES))
 222         fi
 223
 224         START_ID=$(($START_ID+$NUM_POLICIES))
 225
 226         start_timer "Create polices in OSC via agent DMAAP in batch and $interface using "$__httpx
 227         api_put_policy_batch 201 "serv1" ricsim_g1_1 1 $START_ID NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json $NUM_POLICIES
 228         print_timer "Create polices in OSC via agent DMAAP in batch and $interface using "$__httpx
 229
 230         sim_equal ricsim_g1_1 num_instances $((3*$NUM_POLICIES))
 231
 232         START_ID=$(($START_ID+$NUM_POLICIES))
 233
 234         start_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
 235         api_put_policy_batch 201 "serv1" ricsim_g2_1 NOTYPE $START_ID NOTRANSIENT $notificationurl testdata/STD/pi1_template.json $NUM_POLICIES
 236         print_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
 237
 238         sim_equal ricsim_g2_1 num_instances $((3*$NUM_POLICIES))
 239
 240         if [ "$PMS_VERSION" == "V2" ]; then
 241
 242             START_ID=$(($START_ID+$NUM_POLICIES))
 243
 244             start_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
 245             api_put_policy_batch 201 "serv1" ricsim_g3_1 STD_QOS2_0.1.0 $START_ID NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json $NUM_POLICIES
 246             print_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
 247
 248             sim_equal ricsim_g3_1 num_instances $((3*$NUM_POLICIES))
 249         fi
 250
 251         if [ $interface == "SDNC" ]; then
 252             sim_contains_str ricsim_g1_1 remote_hosts $SDNC_APP_NAME
 253             sim_contains_str ricsim_g2_1 remote_hosts $SDNC_APP_NAME
 254             if [ "$PMS_VERSION" == "V2" ]; then
 255                 sim_contains_str ricsim_g3_1 remote_hosts $SDNC_APP_NAME
 256             fi
 257         else
 258             sim_contains_str ricsim_g1_1 remote_hosts $POLICY_AGENT_APP_NAME
 259             sim_contains_str ricsim_g2_1 remote_hosts $POLICY_AGENT_APP_NAME
 260             if [ "$PMS_VERSION" == "V2" ]; then
 261                 sim_contains_str ricsim_g3_1 remote_hosts $POLICY_AGENT_APP_NAME
 262             fi
 263         fi
 264
 265         check_policy_agent_logs
 266         if [[ $interface = *"SDNC"* ]]; then
 267             check_sdnc_logs
 268         fi
 269
 270         store_logs          "${__httpx}__${interface}"
 271     done
 272 done
 273
 274 #### TEST COMPLETE ####
 275
 276 print_result
 277
 278 auto_clean_environment