Update version for rapp enhanced catalogue
[it/dep.git] / smo-install / test / pythonsdk / src / orantests / test_o1.py
1 #!/usr/bin/env python3
2 ###
3 # ============LICENSE_START=======================================================
4 # ORAN SMO PACKAGE - PYTHONSDK TESTS
5 # ================================================================================
6 # Copyright (C) 2021-2022 AT&T Intellectual Property. All rights
7 #                             reserved.
8 # ================================================================================
9 # Licensed under the Apache License, Version 2.0 (the "License");
10 # you may not use this file except in compliance with the License.
11 # You may obtain a copy of the License at
12 #
13 # http://www.apache.org/licenses/LICENSE-2.0
14 #
15 # Unless required by applicable law or agreed to in writing, software
16 # distributed under the License is distributed on an "AS IS" BASIS,
17 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
18 # See the License for the specific language governing permissions and
19 # limitations under the License.
20 # ============LICENSE_END============================================
21 # ===================================================================
22 #
23 ###
24 """O1 tests module."""
25 import datetime
26 import logging
27 import json
28 import os
29 import time
30 import pytest
31 from onapsdk.configuration import settings
32 from smo.network_simulators import NetworkSimulators
33 from smo.dmaap import DmaapUtils
34 from oransdk.dmaap.dmaap import OranDmaap
35 from oransdk.sdnc.sdnc import OranSdnc
36
37 # Set working dir as python script location
38 abspath = os.path.abspath(__file__)
39 dname = os.path.dirname(abspath)
40 os.chdir(dname)
41
42 logging.config.dictConfig(settings.LOG_CONFIG)
43 logger = logging.getLogger("Test O1")
44
45 network_simulators = NetworkSimulators("./resources")
46 dmaap = OranDmaap()
47 dmaap_utils = DmaapUtils()
48 test_session_timestamp = datetime.datetime.utcnow().replace(tzinfo=datetime.timezone.utc)
49
50
51 @pytest.fixture(scope="module", autouse=True)
52 def setup_simulators():
53     """Setup the simulators before the executing the tests."""
54     logger.info("Test class setup for O1 tests")
55
56     # Do a first get to register the o1test/o1test user in DMAAP
57     # all registration messages will then be stored for the registration tests.
58     # If it exists already it clears all cached events.
59
60     dmaap_utils.clean_dmaap(settings.DMAAP_GROUP, settings.DMAAP_USER)
61
62     network_simulators.start_and_wait_network_simulators()
63   # ADD DU RESTART just in case
64     # Wait enough time to have at least the SDNR notifications sent
65     logger.info("Waiting 20s that SDNR sends all registration events to VES...")
66     time.sleep(20)
67     logger.info("Enabling faults/events reporting on SDNR")
68     network_simulators.enable_events_for_all_simulators()
69 #    logger.info("Waiting 20s that the Dmaap faults topic is created...")
70 #    time.sleep(20)
71     # Preparing the DMaap to cache all the events for the fault topics.
72     # If it exists already it clears all cached events.
73     logger.info("Waiting 300s to have registration and faults events in DMaap")
74     time.sleep(300)
75     logger.info("Test Session setup completed successfully")
76
77     ### Cleanup code
78     yield
79     network_simulators.stop_network_simulators()
80     time.sleep(10)
81     logger.info("Test Session cleanup done")
82
83 def create_registration_structure(events):
84     """Decode the registration events list."""
85     devices_found_in_events = dict()
86     for event in events:
87         event_json = json.loads(event)
88         logger.info("Registration json decoded: %s", str(event_json))
89         devices_found_in_events[event_json["event"]["commonEventHeader"]["sourceName"]] = event_json["event"]["commonEventHeader"]["reportingEntityName"]
90
91     logger.info("Devices found in events:%s", devices_found_in_events)
92     return devices_found_in_events
93
94 def create_faults_structure(events):
95     """Decode the fault events list."""
96     faults_found_in_events = dict()
97     for event in events:
98         event_json = json.loads(event)
99         logger.info("Fault json decoded: %s", str(event_json))
100         if event_json["event"]["commonEventHeader"]["sourceName"] in faults_found_in_events:
101             faults_found_in_events[event_json["event"]["commonEventHeader"]["sourceName"]] += 1
102         else:
103             faults_found_in_events[event_json["event"]["commonEventHeader"]["sourceName"]] = 1
104     logger.info("Faults found in events: %s", faults_found_in_events)
105     return faults_found_in_events
106
107 def test_devices_in_sdnc():
108     """Verify that the devices are well defined in SDNC."""
109     logger.info("Verify if devices are well in SDNC")
110     for device in settings.NETWORK_SIMULATORS_LIST:
111         logger.info("Verify if %s is well in SDNR", device)
112         assert OranSdnc.get_devices(device, settings.SDNC_BASICAUTH) == 200
113
114 def validate_faults_timestamp(faults):
115     """Extract only the faults returned by SDNC that have been raised during this test."""
116     valid_faults = []
117     for fault in faults['data-provider:output']['data']:
118         try:
119             converted_fault_timestamp = datetime.datetime.strptime(fault['timestamp'], "%Y-%m-%dT%H:%M:%S.%f%z")
120         except ValueError:
121             converted_fault_timestamp = datetime.datetime.strptime(fault['timestamp'], "%Y-%m-%dT%H:%M:%S%z")
122         logger.info("Comparing fault timestamp %s (%s) to session test timestamp %s", converted_fault_timestamp, fault['timestamp'], test_session_timestamp)
123         if converted_fault_timestamp > test_session_timestamp:
124             valid_faults.append(fault)
125     logger.info("Valid faults array: %s", valid_faults)
126     return valid_faults
127
128 def test_device_faults_in_sdnc():
129     """Verify that the device faults are well defined in SDNC."""
130     logger.info("Verify is there is any events")
131     for device in settings.NETWORK_SIMULATORS_DU_RU_LIST:
132         faults = OranSdnc.get_events(settings.SDNC_BASICAUTH, device).json()
133         logger.info("Verify if %s has events", device)
134         assert len(validate_faults_timestamp(faults)) >= 3
135
136 def test_network_devices_registration_in_dmaap():
137     """Validate that the devices are well registered in SDNR and forwarded to VES."""
138     logger.info("Verify if SDNR sends well the RU registration to VES by checking in DMAAP")
139     # As the user has been registered in DMAAP during test session init,
140     # that call should return all sims registered by SDNR
141     all_registrations = []
142     events = []
143
144     while (events := dmaap.get_message_from_topic(settings.DMAAP_TOPIC_PNFREG, 30000, settings.DMAAP_GROUP, settings.DMAAP_USER).json()) != []:
145         logger.info("Getting a first set of event: %s", events)
146         all_registrations += events
147
148     logger.info("ALl registration events received: %s", all_registrations)
149     # events should be a list of messages
150     logger.info("Verify if the number of events is well >= to the number of expected devices")
151     # The DU can send multiple times message to VES and SDNR can send multiple time event for RU
152     assert len(all_registrations) >= (len(settings.NETWORK_SIMULATORS_DU_RU_LIST))
153     devices_registered = create_registration_structure(all_registrations)
154
155     # Each device must be at least one time in the event list
156     for sim_name in settings.NETWORK_SIMULATORS_DU_RU_LIST:
157         logger.info("Checking if %s is in events list", sim_name)
158         assert sim_name in devices_registered
159         if "o-ru" in sim_name:
160             logger.info("RU event detected checking SDNR has well registered it")
161             assert "ONAP SDN-R" in devices_registered[sim_name]
162         elif "o-du" in sim_name:
163             logger.info("DU detected checking it has well registered itself")
164             assert "o-du" in devices_registered[sim_name]
165
166 def test_device_faults_in_dmaap():
167     """Verify that device faults are well sent to DMAAP by SDNR."""
168     logger.info("Verify if SDNR forwards well the faults sent by the simulators to DMAAP")
169     events = dmaap.get_message_from_topic(settings.DMAAP_TOPIC_FAULT, 30000, settings.DMAAP_GROUP, settings.DMAAP_USER).json()
170     logger.info("Verify if faults have well been received for each device")
171     assert len(events) > 0
172     faults_received = create_faults_structure(events)
173
174     # Each device must have some faults
175     for sim_name in settings.NETWORK_SIMULATORS_DU_RU_LIST:
176         logger.info("Check if %s has at least >=3 faults", sim_name)
177         assert sim_name in faults_received and faults_received[sim_name] >= 3