New test profile and minor updates
[nonrtric.git] / test / auto-test / FTC100.sh
index 42c8676..f7701d5 100755 (executable)
@@ -1,4 +1,4 @@
-#!/usr/bin/env bash
+#!/bin/bash
 
 #  ============LICENSE_START===============================================
 #  Copyright (C) 2020 Nordix Foundation. All rights reserved.
 #
 
 
-TC_ONELINE_DESCR="Full agent API walk through using agent REST/DMAAP and with/without SDNC A1 Controller"
+TC_ONELINE_DESCR="Full a1pms API walkthrough using a1pms REST/DMAAP and with/without SDNC A1 Controller"
 
-. ../common/testcase_common.sh  $@
-. ../common/agent_api_functions.sh
-. ../common/ricsimulator_api_functions.sh
-. ../common/controller_api_functions.sh
+USE_ISTIO=0
+
+#App names to include in the test when running docker, space separated list
+DOCKER_INCLUDED_IMAGES="CBS CONSUL CP CR MR A1PMS RICSIM SDNC NGW KUBEPROXY"
+
+#App names to include in the test when running kubernetes, space separated list
+if [ $USE_ISTIO -eq 0 ]; then
+    KUBE_INCLUDED_IMAGES="CP CR MR A1PMS RICSIM SDNC KUBEPROXY NGW"
+else
+    KUBE_INCLUDED_IMAGES="CP CR MR A1PMS RICSIM SDNC KUBEPROXY NGW KEYCLOAK ISTIO AUTHSIDECAR"
+fi
+#Prestarted app (not started by script) to include in the test when running kubernetes, space separated list
+KUBE_PRESTARTED_IMAGES=""
+
+#Ignore image in DOCKER_INCLUDED_IMAGES, KUBE_INCLUDED_IMAGES if
+#the image is not configured in the supplied env_file
+#Used for images not applicable to all supported profile
+CONDITIONALLY_IGNORED_IMAGES="CBS CONSUL NGW"
+
+#Supported test environment profiles
+SUPPORTED_PROFILES="ONAP-GUILIN ONAP-HONOLULU ONAP-ISTANBUL ONAP-JAKARTA ONAP-KOHN ORAN-CHERRY ORAN-D-RELEASE ORAN-E-RELEASE ORAN-F-RELEASE ORAN-G-RELEASE"
+#Supported run modes
+SUPPORTED_RUNMODES="DOCKER KUBE"
+
+. ../common/testcase_common.sh $@
+
+setup_testenvironment
 
 #### TEST BEGIN ####
 
-#Local vars in test script
-##########################
+generate_policy_uuid
 
-# Path to callback receiver
-CR_PATH="http://$CR_APP_NAME:$CR_EXTERNAL_PORT/callbacks"
+if [ $USE_ISTIO -eq 0 ]; then
+    # Tested variants of REST/DMAAP/SDNC config
+    TESTED_VARIANTS="REST   DMAAP   REST+SDNC   DMAAP+SDNC"
 
-# Tested variants of REST/DMAAP/SDNC config
-TESTED_VARIANTS="REST   DMAAP   REST+SDNC   DMAAP+SDNC"
+    #Test a1pms and simulator protocol versions (others are http only)
+    TESTED_PROTOCOLS="HTTP HTTPS"
+else
+    if [ $USE_ISTIO -eq 1 ]; then
+        echo -e $RED"#########################################"$ERED
+        echo -e $RED"# No test of https when running with istio"$ERED
+        echo -e $RED"# No test of SDNC when running with istio"$ERED
+        echo -e $RED"#########################################"$ERED
+    fi
+    # Tested variants of REST/DMAAP/SDNC config
+    TESTED_VARIANTS="REST   DMAAP"
 
-#Test agent and simulator protocol versions (others are http only)
-TESTED_PROTOCOLS="HTTP HTTPS"
+    #Test a1pms and simulator protocol versions (others are http only)
+    TESTED_PROTOCOLS="HTTP"
+fi
 
 for __httpx in $TESTED_PROTOCOLS ; do
     for interface in $TESTED_VARIANTS ; do
 
         echo "#####################################################################"
         echo "#####################################################################"
-        echo "### Testing agent: "$interface
+        echo "### Testing a1pms: $interface using $__httpx"
         echo "#####################################################################"
         echo "#####################################################################"
 
-
         # Clean container and start all needed containers #
-        clean_containers
+        clean_environment
+
+        if [ $RUNMODE != "KUBE" ]; then
+            USE_ISTIO=0
+            echo "ISTIO not supported by docker - setting USE-ISTIO=0"
+        fi
+
+        if [ $USE_ISTIO -eq 1 ]; then
+            echo -e $RED"#########################################"$ERED
+            echo -e $RED"# Work around istio jwks cache"$ERED
+            echo -e $RED"# Cycle istiod down and up to clear cache"$ERED
+            echo ""
+            __kube_scale deployment istiod istio-system 0
+            __kube_scale deployment istiod istio-system 1
+            echo -e $RED"# Cycle istiod done"
+            echo -e $RED"#########################################"$ERED
+
+            istio_enable_istio_namespace $KUBE_SIM_NAMESPACE
+            istio_enable_istio_namespace $KUBE_NONRTRIC_NAMESPACE
+            istio_enable_istio_namespace $KUBE_A1SIM_NAMESPACE
+        fi
+
+
+        start_kube_proxy
+
+        if [ $USE_ISTIO -eq 1 ]; then
+            start_keycloak
+
+            keycloak_api_obtain_admin_token
+
+            keycloak_api_create_realm                   nrtrealm   true   60
+            keycloak_api_create_confidential_client     nrtrealm   a1pmsc
+            keycloak_api_generate_client_secret         nrtrealm   a1pmsc
+            keycloak_api_get_client_secret              nrtrealm   a1pmsc
+            keycloak_api_create_client_roles            nrtrealm   a1pmsc nrtrole
+            keycloak_api_map_client_roles               nrtrealm   a1pmsc nrtrole
+
+            keycloak_api_get_client_token               nrtrealm   a1pmsc
+
+            CLIENT_TOKEN=$(keycloak_api_read_client_token nrtrealm   a1pmsc)
+            echo "CLIENT_TOKEN: "$CLIENT_TOKEN
+
+            A1PMS_SEC=$(keycloak_api_read_client_secret nrtrealm   a1pmsc)
+            echo "A1PMS_SEC: "$A1PMS_SEC
+
+            # Protect ricsim-g3
+            istio_req_auth_by_jwks              ricsim-g1 $KUBE_A1SIM_NAMESPACE KUBEPROXY "$KUBE_PROXY_ISTIO_JWKS_KEYS"
+            istio_auth_policy_by_issuer         ricsim-g1 $KUBE_A1SIM_NAMESPACE KUBEPROXY
+
+            istio_req_auth_by_jwksuri           ricsim-g1 $KUBE_A1SIM_NAMESPACE nrtrealm
+            istio_auth_policy_by_realm          ricsim-g1 $KUBE_A1SIM_NAMESPACE nrtrealm a1pmsc nrtrole
+
+            # Protect ricsim-g2
+            istio_req_auth_by_jwks              ricsim-g2 $KUBE_A1SIM_NAMESPACE KUBEPROXY "$KUBE_PROXY_ISTIO_JWKS_KEYS"
+            istio_auth_policy_by_issuer         ricsim-g2 $KUBE_A1SIM_NAMESPACE KUBEPROXY
+
+            istio_req_auth_by_jwksuri           ricsim-g2 $KUBE_A1SIM_NAMESPACE nrtrealm
+            istio_auth_policy_by_realm          ricsim-g2 $KUBE_A1SIM_NAMESPACE nrtrealm a1pmsc nrtrole
+
+            # Protect ricsim-g3
+            istio_req_auth_by_jwks              ricsim-g3 $KUBE_A1SIM_NAMESPACE KUBEPROXY "$KUBE_PROXY_ISTIO_JWKS_KEYS"
+            istio_auth_policy_by_issuer         ricsim-g3 $KUBE_A1SIM_NAMESPACE KUBEPROXY
+
+            istio_req_auth_by_jwksuri           ricsim-g3 $KUBE_A1SIM_NAMESPACE nrtrealm
+            istio_auth_policy_by_realm          ricsim-g3 $KUBE_A1SIM_NAMESPACE nrtrealm a1pmsc nrtrole
+
+            # Protect CR
+            istio_req_auth_by_jwks              $CR_APP_NAME $KUBE_SIM_NAMESPACE KUBEPROXY "$KUBE_PROXY_ISTIO_JWKS_KEYS"
+            istio_auth_policy_by_issuer         $CR_APP_NAME $KUBE_SIM_NAMESPACE KUBEPROXY
+
+            istio_req_auth_by_jwksuri           $CR_APP_NAME $KUBE_SIM_NAMESPACE nrtrealm
+            istio_auth_policy_by_realm          $CR_APP_NAME $KUBE_SIM_NAMESPACE nrtrealm a1pmsc nrtrole
+
+            a1pms_configure_sec nrtrealm a1pmsc $A1PMS_SEC
+        fi
+
+        if [ $__httpx == "HTTPS" ]; then
+            use_cr_https
+            use_a1pms_rest_https
+        else
+            use_a1pms_rest_http
+            use_cr_http
+        fi
+
+        start_a1pms NORPOXY $SIM_GROUP/$A1PMS_COMPOSE_DIR/$A1PMS_CONFIG_FILE
+
+        set_a1pms_debug
+
+        # Create service to be able to receive events when rics becomes available
+        # Must use rest towards the a1pms since dmaap is not configured yet
+        a1pms_api_put_service 201 "ric-registration" 0 "$CR_SERVICE_APP_PATH_0/ric-registration"
+
 
         if [ $__httpx == "HTTPS" ]; then
-            echo "Using secure ports towards simulators"
             use_simulator_https
+            use_mr_https
+            if [[ $interface = *"SDNC"* ]]; then
+                use_sdnc_https
+            fi
+            if [[ $interface = *"DMAAP"* ]]; then
+                use_a1pms_dmaap_https
+            else
+                use_a1pms_rest_https
+            fi
         else
-            echo "Using non-secure ports towards simulators"
             use_simulator_http
+            use_mr_http
+            if [[ $interface = *"SDNC"* ]]; then
+                use_sdnc_http
+            fi
+            if [[ $interface = *"DMAAP"* ]]; then
+                use_a1pms_dmaap_http
+            else
+                use_a1pms_rest_http
+            fi
         fi
 
         start_ric_simulators ricsim_g1 1  OSC_2.1.0
         start_ric_simulators ricsim_g2 1  STD_1.1.3
 
-        start_mr
+        sim_put_policy_type 201 ricsim_g1_1 1 testdata/OSC/sim_1.json
+        sim_put_policy_type 201 ricsim_g1_1 2 testdata/OSC/sim_2.json
 
-        start_cr
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            start_ric_simulators ricsim_g3 1  STD_2.0.0
+            sim_put_policy_type 201 ricsim_g3_1 STD_QOS_0_2_0 testdata/STD2/sim_qos.json
+            sim_put_policy_type 201 ricsim_g3_1 STD_QOS2_0.1.0 testdata/STD2/sim_qos2.json
+        fi
 
-        start_consul_cbs
+        start_mr
 
-        if [ $interface == "REST+SDNC" ] || [ $interface == "DMAAP+SDNC" ]; then
-            prepare_consul_config      SDNC    ".consul_config.json"
-        else
-            prepare_consul_config      NOSDNC  ".consul_config.json"
-        fi
+        start_cr 1
 
-        consul_config_app                      ".consul_config.json"
+        start_control_panel $SIM_GROUP/$CONTROL_PANEL_COMPOSE_DIR/$CONTROL_PANEL_CONFIG_FILE
 
-        start_control_panel
+        if [ ! -z "$NRT_GATEWAY_APP_NAME" ]; then
+            start_gateway $SIM_GROUP/$NRT_GATEWAY_COMPOSE_DIR/$NRT_GATEWAY_CONFIG_FILE
+        fi
 
-        if [ $interface == "REST+SDNC" ] || [ $interface == "DMAAP+SDNC" ]; then
+        __CONFIG_HEADER="NOHEADER"
+        if [ $RUNMODE == "KUBE" ]; then
+            __CONFIG_HEADER="HEADER"
+        else
+            if [[ "$A1PMS_FEATURE_LEVEL" == *"NOCONSUL"* ]]; then
+                __CONFIG_HEADER="HEADER"
+            fi
+        fi
+        if [[ $interface = *"SDNC"* ]]; then
             start_sdnc
+            prepare_consul_config      SDNC    ".consul_config.json" $__CONFIG_HEADER
+        else
+            prepare_consul_config      NOSDNC  ".consul_config.json" $__CONFIG_HEADER
         fi
 
-        start_policy_agent
-
-        if [ $interface == "DMAAP" ] || [ $interface == "DMAAP+SDNC" ]; then
-            use_agent_dmaap
+        if [ $RUNMODE == "KUBE" ]; then
+            a1pms_load_config                       ".consul_config.json"
         else
-            if [ $__httpx == "HTTPS" ]; then
-                echo "Using secure ports towards the agent"
-                use_agent_rest_https
+            if [[ "$A1PMS_FEATURE_LEVEL" == *"NOCONSUL"* ]]; then
+                #Temporary switch to http/https if dmaap use. Otherwise it is not possibble to push config
+                if [ $__httpx == "HTTPS" ]; then
+                    use_a1pms_rest_https
+                else
+                    use_a1pms_rest_http
+                fi
+
+                if [[ $interface != *"DMAAP"* ]]; then
+                    echo "{}" > ".consul_config_incorrect.json"
+                    a1pms_api_put_configuration 400 ".consul_config_incorrect.json"
+                fi
+
+                a1pms_api_put_configuration 200 ".consul_config.json"
+                a1pms_api_get_configuration 200 ".consul_config.json"
+                if [ $__httpx == "HTTPS" ]; then
+                    if [[ $interface = *"DMAAP"* ]]; then
+                        use_a1pms_dmaap_https
+                    else
+                        use_a1pms_rest_https
+                    fi
+                else
+                    if [[ $interface = *"DMAAP"* ]]; then
+                        use_a1pms_dmaap_http
+                    else
+                        use_a1pms_rest_http
+                    fi
+                fi
+
             else
-                echo "Using non-secure ports towards the agent"
-                use_agent_rest_http
+                start_consul_cbs
+                consul_config_app                   ".consul_config.json"
             fi
         fi
 
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_equal json:rics 3 300
 
-        cr_equal received_callbacks 0
-        mr_equal requests_submitted 0
-
-        sim_put_policy_type 201 ricsim_g1_1 1 testdata/OSC/sim_1.json
-        sim_put_policy_type 201 ricsim_g1_1 2 testdata/OSC/sim_2.json
+            a1pms_equal json:policy-types 5 120
 
-        api_equal json:rics 2 60
+            a1pms_equal json:policies 0
 
-        api_equal json:policy_schemas 3 120
+            a1pms_equal json:policy-instances 0
+        else
+            a1pms_equal json:rics 2 300
 
-        api_equal json:policy_types 3
+            a1pms_equal json:policy_schemas 3 120
 
-        api_equal json:policies 0
+            a1pms_equal json:policy_types 3
 
-        api_equal json:policy_ids 0
+            a1pms_equal json:policies 0
 
+            a1pms_equal json:policy_ids 0
+        fi
 
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            cr_equal 0 received_callbacks 3 120
+            cr_api_check_all_sync_events 200 0 ric-registration ricsim_g1_1 ricsim_g2_1 ricsim_g3_1
+        fi
+        mr_equal requests_submitted 0
 
 
         echo "############################################"
         echo "############## Health check ################"
         echo "############################################"
 
-        api_get_status 200
+        sleep_wait 120 "Let A1PMS cofiguration take effect"
+
+        a1pms_api_get_status 200
+
+        a1pms_api_get_status_root 200
 
         echo "############################################"
         echo "##### Service registry and supervision #####"
         echo "############################################"
 
-        api_get_services 404 "rapp1"
+        a1pms_api_get_services 404 "service1"
+
+        a1pms_api_put_service 201 "service1" 1000 "$CR_SERVICE_APP_PATH_0/1"
 
-        api_put_service 201 "rapp1" 1000 "$CR_PATH/1"
+        a1pms_api_put_service 200 "service1" 2000 "$CR_SERVICE_APP_PATH_0/1"
 
-        api_put_service 200 "rapp1" 2000 "$CR_PATH/1"
 
+        a1pms_api_put_service 400 "service2" -1 "$CR_SERVICE_APP_PATH_0/2"
 
-        api_put_service 400 "rapp2" -1 "$CR_PATH/2"
+        a1pms_api_put_service 400 "service2" "wrong" "$CR_SERVICE_APP_PATH_0/2"
 
-        api_put_service 400 "rapp2" "wrong" "$CR_PATH/2"
+        a1pms_api_put_service 400 "service2" 100 "/test"
 
-        api_put_service 400 "rapp2" 100 "/test"
+        a1pms_api_put_service 400 "service2" 100 "test-path"
 
-        api_put_service 400 "rapp2" 100 "test-path"
+        a1pms_api_put_service 201 "service2" 300 "ftp://localhost:80/test"
 
-        api_put_service 201 "rapp2" 300 "ftp://localhost:80/test"
+        a1pms_api_get_services 200 "service1" "service1" 2000 "$CR_SERVICE_APP_PATH_0/1"
 
-        api_get_services 200 "rapp1" "rapp1" 2000 "$CR_PATH/1"
+        a1pms_api_get_service_ids 200 "service1" "service2" "ric-registration"
 
-        api_get_service_ids 200 "rapp1" "rapp2"
 
+        a1pms_api_put_service 201 "service3" 5000 "$CR_SERVICE_APP_PATH_0/3"
 
-        api_put_service 201 "rapp3" 5000 "$CR_PATH/3"
 
+        a1pms_api_get_service_ids 200 "service1" "service2" "service3" "ric-registration"
 
-        api_get_service_ids 200 "rapp1" "rapp2" "rapp3"
 
+        a1pms_api_get_services 200 "service1" "service1" 2000 "$CR_SERVICE_APP_PATH_0/1"
 
-        api_get_services 200 "rapp1" "rapp1" 2000 "$CR_PATH/1"
+        a1pms_api_get_services 200 NOSERVICE "service1" 2000 "$CR_SERVICE_APP_PATH_0/1" "service2" 300 "ftp://localhost:80/test" "service3" 5000 "$CR_SERVICE_APP_PATH_0/3"  "ric-registration" 0 "$CR_SERVICE_APP_PATH_0/ric-registration"
 
-        api_get_services 200 NOSERVICE "rapp1" 2000 "$CR_PATH/1" "rapp2" 300 "ftp://localhost:80/test" "rapp3" 5000 "$CR_PATH/3"
+        a1pms_api_get_services 200
 
-        api_get_services 200
+        deviation "TR2 - Keep alive shall return 200/201 according to doc, only 200 works - test combo $interface and $__httpx"
+        #The below should work, keept here until fixed or other decision made
+        #a1pms_api_put_services_keepalive 201 "service1"
+        #Using the below until decision
+        a1pms_api_put_services_keepalive 200 "service1"
 
-        echo -e $YELLOW"TR2"$EYELLOW
-        api_put_services_keepalive 201 "rapp1"
-        echo -e $YELLOW"TR2"$EYELLOW
-        api_put_services_keepalive 201 "rapp3"
+        deviation "TR2 - Keep alive shall return 200/201 according to doc, only 200 works - test combo $interface and $__httpx"
+        #The below should work, keept here until fixed or other decision made
+        #a1pms_api_put_services_keepalive 201 "service3"
+        #Using the below until decision
+        a1pms_api_put_services_keepalive 200 "service3"
 
-        api_put_services_keepalive 200 "rapp1"
+        a1pms_api_put_services_keepalive 200 "service1"
 
-        api_put_services_keepalive 200 "rapp3"
+        a1pms_api_put_services_keepalive 200 "service3"
 
-        api_put_services_keepalive 404 "rapp5"
+        a1pms_api_put_services_keepalive 404 "service5"
 
-        api_get_service_ids 200 "rapp1" "rapp2" "rapp3"
+        a1pms_api_get_service_ids 200 "service1" "service2" "service3"  "ric-registration"
 
-        api_delete_services 204 "rapp1"
+        a1pms_api_delete_services 204 "service1"
 
-        api_get_service_ids 200 "rapp2" "rapp3"
+        a1pms_api_get_service_ids 200 "service2" "service3" "ric-registration"
 
 
-        api_put_service 201 "rapp1" 50 "$CR_PATH/1"
+        a1pms_api_put_service 201 "service1" 50 "$CR_SERVICE_APP_PATH_0/1"
 
-        api_get_service_ids 200 "rapp1" "rapp2" "rapp3"
+        a1pms_api_get_service_ids 200 "service1" "service2" "service3"  "ric-registration"
 
 
-        api_delete_services 204 "rapp1"
-        api_delete_services 204 "rapp3"
+        a1pms_api_delete_services 204 "service1"
+        a1pms_api_delete_services 204 "service3"
 
-        api_equal json:services 1
+        a1pms_equal json:services 2
 
-        api_delete_services 204 "rapp2"
+        a1pms_api_delete_services 204 "service2"
 
-        api_equal json:services 0
+        a1pms_equal json:services 1
 
 
         echo "############################################"
         echo "############## RIC Repository ##############"
         echo "############################################"
 
-        api_get_rics 200 NOTYPE "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE  ricsim_g2_1:me1_ricsim_g2_1,me2_ricsim_g2_1:EMPTYTYPE:AVAILABLE"
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_rics 200 NOTYPE "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE  ricsim_g2_1:me1_ricsim_g2_1,me2_ricsim_g2_1:EMPTYTYPE:AVAILABLE ricsim_g3_1:me1_ricsim_g3_1,me2_ricsim_g3_1:STD_QOS_0_2_0,STD_QOS2_0.1.0:AVAILABLE"
+        else
+            a1pms_api_get_rics 200 NOTYPE "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE  ricsim_g2_1:me1_ricsim_g2_1,me2_ricsim_g2_1:EMPTYTYPE:AVAILABLE"
+        fi
+        a1pms_api_get_rics 200 1 "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE"
+
+        a1pms_api_get_rics 404 47
+
+        a1pms_api_get_rics 404 "test"
+
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_ric 200 me1_ricsim_g1_1 NORIC "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE"
+
+            a1pms_api_get_ric 200 me2_ricsim_g1_1 NORIC "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE"
+
+            a1pms_api_get_ric 200 me1_ricsim_g2_1 NORIC "ricsim_g2_1:me1_ricsim_g2_1,me2_ricsim_g2_1:EMPTYTYPE:AVAILABLE"
 
-        api_get_rics 200 1 "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE"
+            a1pms_api_get_ric 200 me2_ricsim_g2_1 NORIC "ricsim_g2_1:me1_ricsim_g2_1,me2_ricsim_g2_1:EMPTYTYPE:AVAILABLE"
 
-        api_get_rics 404 47
+            a1pms_api_get_ric 200 me1_ricsim_g3_1 NORIC "ricsim_g3_1:me1_ricsim_g3_1,me2_ricsim_g3_1:STD_QOS_0_2_0,STD_QOS2_0.1.0:AVAILABLE"
 
-        api_get_rics 404 "test"
+            a1pms_api_get_ric 200 me2_ricsim_g3_1 NORIC "ricsim_g3_1:me1_ricsim_g3_1,me2_ricsim_g3_1:STD_QOS_0_2_0,STD_QOS2_0.1.0:AVAILABLE"
 
+            a1pms_api_get_ric 200 NOME      ricsim_g1_1 "ricsim_g1_1:me1_ricsim_g1_1,me2_ricsim_g1_1:1,2:AVAILABLE"
 
-        api_get_ric 200 me1_ricsim_g1_1 ricsim_g1_1
+            a1pms_api_get_ric 200 NOME      ricsim_g2_1 "ricsim_g2_1:me1_ricsim_g2_1,me2_ricsim_g2_1:EMPTYTYPE:AVAILABLE"
 
-        api_get_ric 200 me2_ricsim_g1_1 ricsim_g1_1
+            a1pms_api_get_ric 200 NOME      ricsim_g3_1 "ricsim_g3_1:me1_ricsim_g3_1,me2_ricsim_g3_1:STD_QOS_0_2_0,STD_QOS2_0.1.0:AVAILABLE"
 
-        api_get_ric 200 me1_ricsim_g2_1 ricsim_g2_1
+            a1pms_api_get_ric 404 NOME test1
 
-        api_get_ric 200 me2_ricsim_g2_1 ricsim_g2_1
+            a1pms_api_get_ric 404 test NORIC
 
-        api_get_ric 404 test
+            a1pms_api_get_ric 400 me1_ricsim_g1_1 ricsim_g1_1
 
+            a1pms_api_get_ric 400 me1_ricsim_g1_1 TESTRIC
+
+            a1pms_api_get_ric 400 TESTME ricsim_g1_1
+
+        else
+            a1pms_api_get_ric 200 me1_ricsim_g1_1 ricsim_g1_1
+
+            a1pms_api_get_ric 200 me2_ricsim_g1_1 ricsim_g1_1
+
+            a1pms_api_get_ric 200 me1_ricsim_g2_1 ricsim_g2_1
+
+            a1pms_api_get_ric 200 me2_ricsim_g2_1 ricsim_g2_1
+
+            a1pms_api_get_ric 404 test
+        fi
 
         echo "############################################"
         echo "########### A1 Policy Management ###########"
         echo "############################################"
-        echo -e $YELLOW"TR9"$EYELLOW
-        api_get_policy_schema 200 1 testdata/OSC/1-agent-modified.json
-        echo -e $YELLOW"TR9"$EYELLOW
-        api_get_policy_schema 200 2 testdata/OSC/2-agent-modified.json
 
-        api_get_policy_schema 404 3
-        echo -e $YELLOW"TR9"$EYELLOW
-        api_get_policy_schemas 200 NORIC testdata/OSC/1-agent-modified.json testdata/OSC/2-agent-modified.json NOFILE
-        echo -e $YELLOW"TR9"$EYELLOW
-        api_get_policy_schemas 200 ricsim_g1_1 testdata/OSC/1-agent-modified.json testdata/OSC/2-agent-modified.json
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_type 200 1 testdata/OSC/1-a1pms-modified.json
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_type 200 2 testdata/OSC/2-a1pms-modified.json
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_type 200 STD_QOS_0_2_0 testdata/STD2/qos-a1pms-modified.json
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_type 200 STD_QOS2_0.1.0 testdata/STD2/qos2-a1pms-modified.json
+
+            a1pms_api_get_policy_type 404 3
+        else
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_schema 200 1 testdata/OSC/1-a1pms-modified.json
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_schema 200 2 testdata/OSC/2-a1pms-modified.json
+
+            a1pms_api_get_policy_schema 404 3
+        fi
+
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_schemas 404
+        else
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_schemas 200 NORIC testdata/OSC/1-a1pms-modified.json testdata/OSC/2-a1pms-modified.json NOFILE
+            deviation "TR9 - a1pms modify the type with type id - test combo $interface and $__httpx"
+            #Behaviour accepted for now
+            a1pms_api_get_policy_schemas 200 ricsim_g1_1 testdata/OSC/1-a1pms-modified.json testdata/OSC/2-a1pms-modified.json
+
+            a1pms_api_get_policy_schemas 200 ricsim_g2_1 NOFILE
+
+            a1pms_api_get_policy_schemas 404 test
+        fi
+
 
-        api_get_policy_schemas 200 ricsim_g2_1 NOFILE
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_types 200 NORIC 1 2 EMPTY STD_QOS_0_2_0 STD_QOS2_0.1.0
+        else
+            a1pms_api_get_policy_types 200 NORIC 1 2 EMPTY
+        fi
+
+        a1pms_api_get_policy_types 200 ricsim_g1_1 1 2
+
+        a1pms_api_get_policy_types 200 ricsim_g2_1 EMPTY
 
-        api_get_policy_schemas 404 test
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_types 200 ricsim_g3_1 STD_QOS_0_2_0 STD_QOS2_0.1.0
+        fi
 
+        a1pms_api_get_policy_types 404 dummy-ric
 
 
-        api_get_policy_types 200 NORIC 1 2 EMPTY
 
-        api_get_policy_types 200 ricsim_g1_1 1 2
+        a1pms_api_put_service 201 "service10" 3600 "$CR_SERVICE_APP_PATH_0/1"
 
-        api_get_policy_types 200 ricsim_g2_1 EMPTY
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            notificationurl=$CR_SERVICE_APP_PATH_0"/test"
+        else
+            notificationurl=""
+        fi
+        if [[ $interface != *"DMAAP"* ]]; then
+            # Badly formatted json is not possible to send via dmaap
+            a1pms_api_put_policy 400 "unregistered-service" ricsim_g1_1 1 2000 NOTRANSIENT $notificationurl testdata/OSC/pi_bad_template.json
+        fi
+        deviation "TR10 - a1pms allows policy creation on unregistered service (orig problem) - test combo $interface and $__httpx"
+        #Kept until decison
+        #a1pms_api_put_policy 400 "unregistered-service" ricsim_g1_1 1 2000 NOTRANSIENT testdata/OSC/pi1_template.json
+        #Allow 201 for now
+        a1pms_api_put_policy 201 "unregistered-service" ricsim_g1_1 1 2000 NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json
 
-        api_get_policy_types 404 dummy-ric
+        a1pms_api_put_policy 201 "service10" ricsim_g1_1 1 5000 NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json
+        a1pms_api_put_policy 200 "service10" ricsim_g1_1 1 5000 NOTRANSIENT $notificationurl testdata/OSC/pi1_template.json
 
+        a1pms_api_put_policy 200 "service10" ricsim_g1_1 1 5000 true $notificationurl testdata/OSC/pi1_template.json
+        a1pms_api_put_policy 200 "service10" ricsim_g1_1 1 5000 false $notificationurl testdata/OSC/pi1_template.json
 
+        a1pms_api_put_policy 201 "service10" ricsim_g2_1 NOTYPE 5100 NOTRANSIENT $notificationurl testdata/STD/pi1_template.json
+        a1pms_api_put_policy 200 "service10" ricsim_g2_1 NOTYPE 5100 NOTRANSIENT $notificationurl testdata/STD/pi1_template.json
 
-        api_put_service 201 "rapp10" 3600 "$CR_PATH/1"
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_put_policy 400 "unregistered-r-app" ricsim_g1_1 1 2000 testdata/OSC/pi1_template.json
+        a1pms_api_put_policy 200 "service10" ricsim_g2_1 NOTYPE 5100 true $notificationurl testdata/STD/pi1_template.json
+        a1pms_api_put_policy 200 "service10" ricsim_g2_1 NOTYPE 5100 false $notificationurl testdata/STD/pi1_template.json
 
-        api_put_policy 201 "rapp10" ricsim_g1_1 1 5000 testdata/OSC/pi1_template.json
-        api_put_policy 200 "rapp10" ricsim_g1_1 1 5000 testdata/OSC/pi1_template.json
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_put_policy 201 "service10" ricsim_g3_1 STD_QOS2_0.1.0 5200 NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json
+            a1pms_api_put_policy 200 "service10" ricsim_g3_1 STD_QOS2_0.1.0 5200 NOTRANSIENT $notificationurl testdata/STD2/pi_qos2_template.json
 
-        api_put_policy 201 "rapp10" ricsim_g2_1 NOTYPE 5100 testdata/STD/pi1_template.json
-        api_put_policy 200 "rapp10" ricsim_g2_1 NOTYPE 5100 testdata/STD/pi1_template.json
+            a1pms_api_put_policy 200 "service10" ricsim_g3_1 STD_QOS2_0.1.0 5200 true $notificationurl testdata/STD2/pi_qos2_template.json
+            a1pms_api_put_policy 200 "service10" ricsim_g3_1 STD_QOS2_0.1.0 5200 false $notificationurl testdata/STD2/pi_qos2_template.json
+        fi
 
+        a1pms_api_get_policy_status 404 1
+        a1pms_api_get_policy_status 404 2
         VAL='NOT IN EFFECT'
-        api_get_policy_status 200 5000 OSC "$VAL" "false"
-        api_get_policy_status 200 5100 STD "UNDEFINED"
+        a1pms_api_get_policy_status 200 5000 OSC "$VAL" "false"
+        a1pms_api_get_policy_status 200 5100 STD "UNDEFINED"
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_status 200 5200 STD2 EMPTY EMPTY
+        fi
 
 
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_equal json:policies 2
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_equal json:policy_ids 2
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_get_policy_ids 200 NORIC NOSERVICE NOTYPE 5000 5100
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_get_policy_ids 200 ricsim_g1_1 NOSERVICE NOTYPE 5000
+        deviation "TR10 - a1pms allows policy creation on unregistered service (side effect of orig. problem)- test combo $interface and $__httpx"
+        #kept until decision
+        #a1pms_equal json:policies 2
+        #Allow 3 for now
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_equal json:policies 4
+        else
+            a1pms_equal json:policies 3
+        fi
 
-        api_get_policy_ids 200 ricsim_g2_1 NOSERVICE NOTYPE 5100
+        deviation "TR10 - a1pms allows policy creation on unregistered service (side effect of orig. problem)- test combo $interface and $__httpx"
+        #kept until decision
+        #a1pms_equal json:policy_ids 2
+        #Allow 3 for now
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_equal json:policy-instances 4
+        else
+            a1pms_equal json:policy_ids 3
+        fi
 
+        deviation "TR10 - a1pms allows policy creation on unregistered service (side effect of orig. problem)- test combo $interface and $__httpx"
+        #kept until decision
+        #a1pms_api_get_policy_ids 200 NORIC NOSERVICE NOTYPE 5000 5100
+        #Allow policy create with unregistered service for now
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_ids 200 NORIC NOSERVICE NOTYPE 5000 5100 2000 5200
+        else
+            a1pms_api_get_policy_ids 200 NORIC NOSERVICE NOTYPE 5000 5100 2000
+        fi
 
-        api_get_policy_ids 200 NORIC "rapp10" NOTYPE 5000 5100
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_get_policy_ids 200 NORIC NOSERVICE 1 5000
+        deviation "TR10 - a1pms allows policy creation on unregistered service (side effect of orig. problem)- test combo $interface and $__httpx"
+        #kept until decision
+        #a1pms_api_get_policy_ids 200 ricsim_g1_1 NOSERVICE NOTYPE 5000
+        #Allow policy create with unregistered service for now
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_ids 200 ricsim_g1_1 NOSERVICE NOTYPE 5000 2000
 
-        api_get_policy_ids 200 NORIC NOSERVICE 2 NOID
+            a1pms_api_get_policy_ids 200 ricsim_g2_1 NOSERVICE NOTYPE 5100
 
-        api_get_policy_ids 200 ricsim_g2_1 NOSERVICE 1 NOID
+            a1pms_api_get_policy_ids 200 ricsim_g3_1 NOSERVICE NOTYPE 5200
 
+            a1pms_api_get_policy_ids 200 NORIC "service10" NOTYPE 5000 5100 5200
+        else
+            a1pms_api_get_policy_ids 200 ricsim_g1_1 NOSERVICE NOTYPE 5000 2000
 
-        api_get_policy 200 5000 testdata/OSC/pi1_template.json
+            a1pms_api_get_policy_ids 200 ricsim_g2_1 NOSERVICE NOTYPE 5100
 
-        api_get_policy 200 5100 testdata/STD/pi1_template.json
 
+            a1pms_api_get_policy_ids 200 NORIC "service10" NOTYPE 5000 5100
+        fi
+
+        deviation "TR10 - a1pms allows policy creation on unregistered service (side effect of orig. problem)- test combo $interface and $__httpx"
+        #kept until decision
+        #a1pms_api_get_policy_ids 200 NORIC NOSERVICE 1 5000
+        #Allow policy create with unregistered service for now
+
+        a1pms_api_get_policy_ids 200 NORIC NOSERVICE 1 5000 2000
+
+        a1pms_api_get_policy_ids 200 NORIC NOSERVICE 2 NOID
 
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy_ids 200 NORIC NOSERVICE STD_QOS2_0.1.0 5200
+        fi
 
-        api_get_policies 200 ricsim_g1_1 "rapp10" 1 5000 ricsim_g1_1 "rapp10" 1 testdata/OSC/pi1_template.json
+        a1pms_api_get_policy_ids 200 ricsim_g2_1 NOSERVICE 1 NOID
 
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_api_get_policy 200 5000 testdata/OSC/pi1_template.json "service10" ricsim_g1_1 1 false $notificationurl
 
+            a1pms_api_get_policy 200 5100 testdata/STD/pi1_template.json "service10" ricsim_g2_1 NOTYPE false $notificationurl
 
+            a1pms_api_get_policy 200 5200 testdata/STD2/pi_qos2_template.json "service10" ricsim_g3_1 STD_QOS2_0.1.0 false $notificationurl
 
-        echo -e $YELLOW"TR10"$EYELLOW
-        api_delete_policy 404 2000
+            a1pms_api_get_policies 200 ricsim_g1_1 "service10" 1 5000 ricsim_g1_1 "service10" 1 false $notificationurl testdata/OSC/pi1_template.json
+        else
+            a1pms_api_get_policy 200 5000 testdata/OSC/pi1_template.json
 
-        api_delete_policy 404 1500
+            a1pms_api_get_policy 200 5100 testdata/STD/pi1_template.json
 
-        api_delete_policy 204 5000
+            a1pms_api_get_policies 200 ricsim_g1_1 "service10" 1 5000 ricsim_g1_1 "service10" 1 testdata/OSC/pi1_template.json
+        fi
 
-        api_equal json:policies 1
+        deviation "TR10 - a1pms allows policy creation on unregistered service (side effect of orig. problem)- test combo $interface and $__httpx"
+        #kept until decision
+        #a1pms_api_delete_policy 404 2000
+        #Allow policy create with unregistered service for now
+        a1pms_api_delete_policy 204 2000
 
-        api_equal json:policy_ids 1
+        a1pms_api_delete_policy 404 1500
 
-        api_delete_policy 204 5100
+        a1pms_api_delete_policy 204 5000
 
-        api_equal json:policies 0
+        if [ "$A1PMS_VERSION" == "V2" ]; then
 
-        api_equal json:policy_ids 0
+            a1pms_api_delete_policy 204 5200
+        fi
 
-        cr_equal received_callbacks 0
+        a1pms_equal json:policies 1
 
-        if [ $interface == "DMAAP" ] || [ $interface == "DMAAP+SDNC" ]; then
+
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_equal json:policy-instances 1
+        else
+            a1pms_equal json:policy_ids 1
+        fi
+
+        a1pms_api_delete_policy 204 5100
+
+        a1pms_equal json:policies 0
+
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            a1pms_equal json:policy-instances 0
+        else
+            a1pms_equal json:policy_ids 0
+        fi
+
+        if [ "$A1PMS_VERSION" == "V2" ]; then
+            cr_equal 0 received_callbacks 3
+        fi
+
+        if [[ $interface = *"DMAAP"* ]]; then
             mr_greater requests_submitted 0
             VAL=$(mr_read requests_submitted)
             mr_equal requests_fetched $VAL
@@ -325,11 +687,29 @@ for __httpx in $TESTED_PROTOCOLS ; do
         else
             mr_equal requests_submitted 0
         fi
+        if [ $USE_ISTIO -eq 0 ]; then
+            if [[ $interface = *"SDNC"* ]]; then
+                sim_contains_str ricsim_g1_1 remote_hosts $SDNC_APP_NAME
+                sim_contains_str ricsim_g2_1 remote_hosts $SDNC_APP_NAME
+                if [ "$A1PMS_VERSION" == "V2" ]; then
+                    sim_contains_str ricsim_g3_1 remote_hosts $SDNC_APP_NAME
+                fi
+            else
+                sim_contains_str ricsim_g1_1 remote_hosts $A1PMS_APP_NAME
+                sim_contains_str ricsim_g2_1 remote_hosts $A1PMS_APP_NAME
+                if [ "$A1PMS_VERSION" == "V2" ]; then
+                    sim_contains_str ricsim_g3_1 remote_hosts $A1PMS_APP_NAME
+                fi
+            fi
+        fi
 
-        check_policy_agent_logs
-        check_control_panel_logs
+        check_a1pms_logs
+
+        if [[ $interface = *"SDNC"* ]]; then
+            check_sdnc_logs
+        fi
 
-        store_logs          $interface
+        store_logs          "${__httpx}__${interface}"
 
     done
 
@@ -340,4 +720,4 @@ done
 
 print_result
 
-auto_clean_containers
+auto_clean_environment