Merge "Test updates for ECS, PMS and SDNC"
[nonrtric.git] / test / auto-test / FTC800.sh
1 #!/bin/bash
2
3 #  ============LICENSE_START===============================================
4 #  Copyright (C) 2020 Nordix Foundation. All rights reserved.
5 #  ========================================================================
6 #  Licensed under the Apache License, Version 2.0 (the "License");
7 #  you may not use this file except in compliance with the License.
8 #  You may obtain a copy of the License at
9 #
10 #       http://www.apache.org/licenses/LICENSE-2.0
11 #
12 #  Unless required by applicable law or agreed to in writing, software
13 #  distributed under the License is distributed on an "AS IS" BASIS,
14 #  WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
15 #  See the License for the specific language governing permissions and
16 #  limitations under the License.
17 #  ============LICENSE_END=================================================
18 #
19
20 TC_ONELINE_DESCR="Create 10000 policies in sequence using http/https and Agent REST/DMAAP with/without SDNC controller"
21
22 #App names to include in the test when running docker, space separated list
23 DOCKER_INCLUDED_IMAGES="CBS CONSUL CP CR MR PA RICSIM SDNC NGW"
24
25 #App names to include in the test when running kubernetes, space separated list
26 KUBE_INCLUDED_IMAGES="CP CR MR PA RICSIM SDNC KUBEPROXY NGW"
27 #Prestarted app (not started by script) to include in the test when running kubernetes, space separated list
28 KUBE_PRESTARTED_IMAGES=""
29
30 #Ignore image in DOCKER_INCLUDED_IMAGES, KUBE_INCLUDED_IMAGES if
31 #the image is not configured in the supplied env_file
32 #Used for images not applicable to all supported profile
33 CONDITIONALLY_IGNORED_IMAGES="NGW"
34
35 #Supported test environment profiles
36 SUPPORTED_PROFILES="ONAP-GUILIN ONAP-HONOLULU ONAP-ISTANBUL ORAN-CHERRY ORAN-D-RELEASE ORAN-E-RELEASE"
37 #Supported run modes
38 SUPPORTED_RUNMODES="DOCKER KUBE"
39
40 . ../common/testcase_common.sh  $@
41 . ../common/agent_api_functions.sh
42 . ../common/ricsimulator_api_functions.sh
43 . ../common/cr_api_functions.sh
44 . ../common/mr_api_functions.sh
45 . ../common/control_panel_api_functions.sh
46 . ../common/controller_api_functions.sh
47 . ../common/consul_cbs_functions.sh
48 . ../common/kube_proxy_api_functions.sh
49 . ../common/gateway_api_functions.sh
50
51 setup_testenvironment
52
53 #### TEST BEGIN ####
54
55 generate_policy_uuid
56
57 #Local vars in test script
58 ##########################
59 # Number of policies in each sequence
60 NUM_POLICIES=10000
61
62 # Tested variants of REST/DMAAP/SDNC config
63 TESTED_VARIANTS="NOSDNC   SDNC"
64
65 #Test agent and simulator protocol versions (others are http only)
66 TESTED_PROTOCOLS="HTTP HTTPS"
67
68 for __httpx in $TESTED_PROTOCOLS ; do
69     for interface in $TESTED_VARIANTS ; do
70
71         echo "#####################################################################"
72         echo "#####################################################################"
73         echo "### Testing agent via $interface using $__httpx"
74         echo "#####################################################################"
75         echo "#####################################################################"
76
77         if [ $__httpx == "HTTPS" ]; then
78             use_cr_https
79             use_simulator_https
80             use_mr_https
81             use_agent_rest_https
82         else
83             use_cr_http
84             use_simulator_http
85             use_mr_http
86             use_agent_rest_http
87         fi
88
89         # Policy instance start id
90         START_ID=1
91
92         clean_environment
93
94         if [ $RUNMODE == "KUBE" ]; then
95             start_kube_proxy
96         fi
97
98         start_ric_simulators ricsim_g1 1 OSC_2.1.0
99         start_ric_simulators ricsim_g2 1 STD_1.1.3
100         if [ "$PMS_VERSION" == "V2" ]; then
101             start_ric_simulators ricsim_g3 1  STD_2.0.0
102         fi
103
104         start_mr
105
106         start_cr
107
108         start_control_panel $SIM_GROUP/$CONTROL_PANEL_COMPOSE_DIR/$CONTROL_PANEL_CONFIG_FILE
109
110         if [ ! -z "$NRT_GATEWAY_APP_NAME" ]; then
111             start_gateway $SIM_GROUP/$NRT_GATEWAY_COMPOSE_DIR/$NRT_GATEWAY_CONFIG_FILE
112         fi
113
114         start_policy_agent NORPOXY $SIM_GROUP/$POLICY_AGENT_COMPOSE_DIR/$POLICY_AGENT_CONFIG_FILE
115
116         set_agent_debug
117
118         mr_equal requests_submitted 0
119
120         if [[ $interface == "SDNC" ]]; then
121             start_sdnc
122             prepare_consul_config      SDNC    ".consul_config.json"
123         else
124             prepare_consul_config      NOSDNC  ".consul_config.json"
125         fi
126
127         if [ $RUNMODE == "DOCKER" ]; then
128             start_consul_cbs
129         fi
130
131         if [ $RUNMODE == "KUBE" ]; then
132             agent_load_config                       ".consul_config.json"
133         else
134             consul_config_app                      ".consul_config.json"
135         fi
136
137
138         api_get_status 200
139
140         sim_print ricsim_g1_1 interface
141         sim_print ricsim_g2_1 interface
142         if [ "$PMS_VERSION" == "V2" ]; then
143             sim_print ricsim_g3_1 interface
144         fi
145
146         sim_put_policy_type 201 ricsim_g1_1 1 testdata/OSC/sim_1.json
147
148         if [ "$PMS_VERSION" == "V2" ]; then
149             sim_put_policy_type 201 ricsim_g3_1 STD_QOS2_0.1.0 testdata/STD2/sim_qos2.json
150
151             api_equal json:policy-types 3 300  #Wait for the agent to refresh types from the simulators
152         else
153             api_equal json:policy_types 2 300  #Wait for the agent to refresh types from the simulators
154         fi
155
156         api_put_service 201 "serv1" 3600 "$CR_SERVICE_PATH/1"
157
158         if [ "$PMS_VERSION" == "V2" ]; then
159             notificationurl=$CR_SERVICE_PATH"/test"
160         else
161             notificationurl=""
162         fi
163
164         start_timer "Create polices in OSC via agent REST and $interface using "$__httpx
165         api_put_policy 201 "serv1" ricsim_g1_1 1 $START_ID NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json $NUM_POLICIES
166         print_timer "Create polices in OSC via agent REST and $interface using "$__httpx
167
168         sim_equal ricsim_g1_1 num_instances $NUM_POLICIES
169
170         START_ID=$(($START_ID+$NUM_POLICIES))
171
172         start_timer "Create polices in STD via agent REST and $interface using "$__httpx
173         api_put_policy 201 "serv1" ricsim_g2_1 NOTYPE $START_ID NOTRANSIENT $notificationurl testdata/STD/pi1_template.json $NUM_POLICIES
174         print_timer "Create polices in STD via agent REST and $interface using "$__httpx
175
176         sim_equal ricsim_g2_1 num_instances $NUM_POLICIES
177
178         if [ "$PMS_VERSION" == "V2" ]; then
179
180             START_ID=$(($START_ID+$NUM_POLICIES))
181
182             start_timer "Create polices in STD 2 via agent REST and $interface using "$__httpx
183             api_put_policy 201 "serv1" ricsim_g3_1 STD_QOS2_0.1.0 $START_ID NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json $NUM_POLICIES
184             print_timer "Create polices in STD via agent REST and $interface using "$__httpx
185
186             sim_equal ricsim_g3_1 num_instances $NUM_POLICIES
187         fi
188
189         if [ $__httpx == "HTTPS" ]; then
190             echo "Using secure ports towards dmaap"
191             use_agent_dmaap_https
192         else
193             echo "Using non-secure ports towards dmaap"
194             use_agent_dmaap_http
195         fi
196
197         START_ID=$(($START_ID+$NUM_POLICIES))
198
199         start_timer "Create polices in OSC via agent DMAAP, one by one, and $interface using "$__httpx
200         api_put_policy 201 "serv1" ricsim_g1_1 1 $START_ID NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json $NUM_POLICIES
201         print_timer "Create polices in OSC via agent DMAAP, one by one, and $interface using "$__httpx
202
203         sim_equal ricsim_g1_1 num_instances $((2*$NUM_POLICIES))
204
205         START_ID=$(($START_ID+$NUM_POLICIES))
206
207         start_timer "Create polices in STD via agent DMAAP, one by one, and $interface using "$__httpx
208         api_put_policy 201 "serv1" ricsim_g2_1 NOTYPE $START_ID NOTRANSIENT $notificationurl testdata/STD/pi1_template.json $NUM_POLICIES
209         print_timer "Create polices in STD via agent DMAAP, one by one, and $interface using "$__httpx
210
211         sim_equal ricsim_g2_1 num_instances $((2*$NUM_POLICIES))
212
213         if [ "$PMS_VERSION" == "V2" ]; then
214
215             START_ID=$(($START_ID+$NUM_POLICIES))
216
217             start_timer "Create polices in STD 2 via agent DMAAP, one by one, and $interface using "$__httpx
218             api_put_policy 201 "serv1" ricsim_g3_1 STD_QOS2_0.1.0 $START_ID NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json $NUM_POLICIES
219             print_timer "Create polices in STD via agent DMAAP, one by one, and $interface using "$__httpx
220
221             sim_equal ricsim_g3_1 num_instances $((2*$NUM_POLICIES))
222         fi
223
224         START_ID=$(($START_ID+$NUM_POLICIES))
225
226         start_timer "Create polices in OSC via agent DMAAP in batch and $interface using "$__httpx
227         api_put_policy_batch 201 "serv1" ricsim_g1_1 1 $START_ID NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json $NUM_POLICIES
228         print_timer "Create polices in OSC via agent DMAAP in batch and $interface using "$__httpx
229
230         sim_equal ricsim_g1_1 num_instances $((3*$NUM_POLICIES))
231
232         START_ID=$(($START_ID+$NUM_POLICIES))
233
234         start_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
235         api_put_policy_batch 201 "serv1" ricsim_g2_1 NOTYPE $START_ID NOTRANSIENT $notificationurl testdata/STD/pi1_template.json $NUM_POLICIES
236         print_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
237
238         sim_equal ricsim_g2_1 num_instances $((3*$NUM_POLICIES))
239
240         if [ "$PMS_VERSION" == "V2" ]; then
241
242             START_ID=$(($START_ID+$NUM_POLICIES))
243
244             start_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
245             api_put_policy_batch 201 "serv1" ricsim_g3_1 STD_QOS2_0.1.0 $START_ID NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json $NUM_POLICIES
246             print_timer "Create polices in STD via agent DMAAP in batch and $interface using "$__httpx
247
248             sim_equal ricsim_g3_1 num_instances $((3*$NUM_POLICIES))
249         fi
250
251         if [ $interface == "SDNC" ]; then
252             sim_contains_str ricsim_g1_1 remote_hosts $SDNC_APP_NAME
253             sim_contains_str ricsim_g2_1 remote_hosts $SDNC_APP_NAME
254             if [ "$PMS_VERSION" == "V2" ]; then
255                 sim_contains_str ricsim_g3_1 remote_hosts $SDNC_APP_NAME
256             fi
257         else
258             sim_contains_str ricsim_g1_1 remote_hosts $POLICY_AGENT_APP_NAME
259             sim_contains_str ricsim_g2_1 remote_hosts $POLICY_AGENT_APP_NAME
260             if [ "$PMS_VERSION" == "V2" ]; then
261                 sim_contains_str ricsim_g3_1 remote_hosts $POLICY_AGENT_APP_NAME
262             fi
263         fi
264
265         check_policy_agent_logs
266         if [[ $interface = *"SDNC"* ]]; then
267             check_sdnc_logs
268         fi
269
270         store_logs          "${__httpx}__${interface}"
271     done
272 done
273
274 #### TEST COMPLETE ####
275
276 print_result
277
278 auto_clean_environment