Mostly integration test work:
[ric-plt/a1.git] / docs / release-notes.rst
1 .. This work is licensed under a Creative Commons Attribution 4.0 International License.
2 .. http://creativecommons.org/licenses/by/4.0
3 .. Copyright (C) 2019 AT&T Intellectual Property
4
5 Release Notes
6 ===============
7
8 All notable changes to this project will be documented in this file.
9
10 The format is based on `Keep a Changelog <http://keepachangelog.com/>`__
11 and this project adheres to `Semantic Versioning <http://semver.org/>`__.
12
13 .. contents::
14    :depth: 3
15    :local:
16
17 [2.1.3] - 2/13/2020
18 -------------------
19 ::
20
21     * This is a pretty big amount of work/changes, however no APIs were changed hence the semver patch
22     * Switches A1's three test receivers (integration tests) over to golang; this was mostly done to learn the go xapp framework and they are identical in functionality.
23     * Upgrades the version of rmr in A1 and all integration receivers to 1.13.*
24     * Uses a much fancier Docker build to reduce the size of a1's image. The python:3.7-alpine image itself is 98MB and A1 is now only ~116MB, so we're done optimizing A1's container size.
25
26 [2.1.2] - 1/22/2020
27 -------------------
28
29 ::
30
31     * Upgrades from sdl 2.0.2 to 2.0.3
32     * Integrates an sdl healthcheck into a1's healthcheck
33
34
35 [2.1.1] - 1/14/2020
36 -------------------
37
38 ::
39
40     * Upgrades from sdl 1.0.0 to 2.0.2
41     * Delete a1test_helpers because SDL 2.0.2 provides the mockup we need
42     * Remove general catch all from A1
43
44 [2.1.0] - 1/8/2020
45 ------------------
46
47 ::
48
49     * Represents a resillent version of 2.0.0 that uses Redis for persistence
50     * Now relies on SDL and dbaas; SDL is the python interface library to dbaas
51     * Adds a 503 http code to nearly all http methods, as A1 now depends on an upstream system
52     * Integration tests have a copy of a dbaas helm chart, however the goal is to simplify that deployment per https://jira.o-ran-sc.org/browse/RIC-45
53     * Unit tests have a mockup of SDL, however again the goal is to simplify as SDL grows per https://jira.o-ran-sc.org/browse/RIC-44
54
55 [2.0.0] - 12/9/2019
56 -------------------
57
58 ::
59
60     * Implements new logic around when instances are deleted. See flowcharts in docs/. Basically timeouts now trigger to actually delete instances from a1s database, and these timeouts are configurable.
61     * Eliminates the barrier to deleting an instance when no xapp evdr replied (via timeouts)
62     * Add two new ENV variables that control timeouts
63     * Make unit tests more modular so new workflows can be tested easily
64     * Fixes the API for ../status to return a richer structure. This is an (albeit tiny) API change.
65     * Clean up unused items in the integration tests helm chart
66     * Removed "RMR_RCV_RETRY_INTERVAL" leftovers since this isn't used anymore
67     * Uses the standard RIC logging library
68     * Switch the backend routing scheme to using subscription id with constant message types, per request.
69     * Given the above, policy type ids can be any valid 32bit greater than 0
70     * Decouple the API between northbound and A1 from A1 with xapps. This is now two seperate OpenAPI files
71     * Update example for AC Xapp
72     * Updgrade rmr and rmr-python to utilize new features; lots of cleanups because of that
73     * Implements a POLICY QUERY feature where A1 listens for queries for a policy type. A1 then responds via multiple RTS messages every policy instance of that policy type (and expects an ACK back from xapps as usual). This feature can be used for xapp recovery etc.
74
75 [1.0.4]
76 -------
77
78 ::
79
80     * Only external change here is to healthcheck the rmr thread as part of a1s healthcheck. k8s will now respin a1 if that is failing.
81     * Refactors (simplifies) how we wait for rmr initialization; it is now called as part of __init__
82     * Refactors (simplifies) how the thread is actually launched; it is now internal to the object and also a part of __init__
83     * Cleans up unit testing; a1rmr now exposes a replace_rcv_func; useful for unit testing, harmless if not called otherwise
84     * Upgrades to rmr-python 1.0.0 for simpler message allocation
85
86 [1.0.3] - 10/22/2019
87 --------------------
88
89 ::
90
91     * Move database cleanup (e.g., deleting instances based on statuses) into the polling loop
92     * Rework how unit testing works with the polling loop; prior, exceptions were being thrown silently from the thread but not printed. The polling thread has now been paramaterized with override functions for the purposes of testing
93     * Make type cleanup more efficient since we know exactly what instances were touched, and it's inefficient to iterate over all instances if they were not
94     * Bump rmr-python version, and bump rmr version
95     * Still an item left to do in this work; refactor the thread slightly to tie in a healthcheck with a1s healthcheck. We need k8s to restart a1 if that thread dies too.
96
97 [1.0.2] - 10/17/2019
98 --------------------
99
100 ::
101
102     * a1 now has a seperate, continuous polling thread
103       this will enable operations like database cleanup (based on ACKs) and external notifications in real time,
104       rather than when the API is invoked
105     * all rmr send and receive operations are now in this thread
106     * introduces a thread safe job queue between the two threads
107     * Not done yet: database cleanups in the thread
108     * Bump rmr python version
109     * Clean up some logging
110
111 [1.0.1] - 10/15/2019
112 --------------------
113
114 ::
115
116     * Moves the "database" access calls to mimick the SDL API, in preparation for moving to SDL
117     * Does not yet actually use SDL or Redis, but the transition to those will be much shorter after this change.
118
119
120 [1.0.0] - 10/7/2019
121 -------------------
122
123 ::
124
125     * Represents v1.0.0 of the A1 API for O-RAN-SC Release A
126     * Finished here:
127       - Implement type DELETE
128       - Clean up where policy instance cleanups happen
129
130
131 [0.14.1] - 10/2/2019
132 --------------------
133
134 ::
135
136     * Upgrade rmr to 1.9.0
137     * Upgrade rmr-python to 0.13.2
138     * Use the new helpers module in rmr-python for the rec all functionality
139     * Switch rmr mode to a multithreaded mode that continuously reads from rmr and populates an internal queue of messages with a deterministic queue size (2048) which is better behavior for A1
140     * Fix a memory leak (python obj is garbage collected but not the underlying C memory allocation)
141
142
143
144 [0.14.0] - 10/1/2019
145 --------------------
146
147 ::
148
149     * Implement instance delete
150     * Moves away from the status vector and now aggregates statuses
151     * Pop through a1s mailbox "3x as often"; on all 3 kinds of instance GET since all such calls want the latest information
152     * Misc cleanups in controller (closures ftw)
153     * Add rmr-version.yaml for CICD jobs
154
155 [0.13.0] - 9/25/2019
156 --------------------
157
158 ::
159
160     * Implement GET all policy type ids
161     * Implement GET all policy instance ids for a policy type
162     * fix a tiny bug in integration test receiver
163
164
165 [0.12.1] - 9/20/2019
166 --------------------
167
168 ::
169
170     * switch to rmr 1.8.1 to pick up a non blocking variant of rmr that deals with bad routing tables (no hanging connections / blocking calls)
171     * improve test receiver to behave with this setup
172     * add integration test for this case
173     * this also switches past 1.5.x, which included another change that altered the behavior of rts; deal with this with a change to a1s helmchart (env: `RMR_SRC_ID`) that causes the sourceid to be set to a1s service name, which was not needed prior
174     * improve integration tests overall
175
176
177 [0.12.0] - 9/19/2019
178 --------------------
179
180 ::
181
182     * Implement type PUT
183     * Implement type GET
184     * Remove RIC manifest
185     * Read type GET to get schema for instance PUT
186     * Remove Utils (no longer needed)
187     * lots more tests (unit and integration)
188
189 [0.11.0] - 9/17/2019
190 --------------------
191
192 ::
193
194     * This is on the road to release 1.0.0. It is not meant to be tested (E2E) as it's own release
195     * Implement the Release A spec in the openapi.yaml
196     * Rework A1 to follow that spec
197     * Remove rmr_mapping now that we use policyid as the mtype to send and a well known mtype for the ACKs
198     * Add the delay receiver test to the tavern integration tests
199     * Remove unneeded ENV variables from helm charts
200     * Switch away from builder images to avoid quicksand; upgrade rmr at our own pace
201
202
203 [0.10.3] - 8/20/2019
204 --------------------
205
206 ::
207
208     * Update to later rmr-python
209     * Add docs about upgrading rmr
210     * remove bombarder since tavern runs apache bench
211
212
213 [0.10.2] - 8/14/2019
214 --------------------
215
216 ::
217
218     * Update to later rmr-python
219
220 [0.10.1] - 8/9/2019
221 -------------------
222
223 ::
224
225     * Greatly reduce the size of A1 docker from 1.25GB to ~278MB.
226     * Add a seperate dockerfile for unit testing
227
228
229 [0.10.0] - 7/30/2019
230 --------------------
231
232 ::
233
234    * Rename all /ric/ URLs to be consistent with requirements of /a1-p/
235
236
237 [0.9.0] - 7/22/2019
238 -------------------
239
240 ::
241
242    * Implement the GET on policies
243    * Add a new endpoint for healthcheck. NOTE, it has been decided by oran architecture documents that this policy interface should be named a1-p in all URLS. In a future release the existing URLs will be renamed (existing URLs were not changed in this release).
244
245
246 [0.8.4] - 7/16/2019
247 -------------------
248
249 ::
250
251    * Fix the 400, which was in the API, but wasn't actually implemented
252    * Update the test fixture manifests to reflect the latest adm control, paves way for next feature coming which is a policy GET
253
254
255
256 [0.8.3] - 6/18/2019
257 -------------------
258
259 ::
260
261    * Use base Docker with NNG version 1.1.1
262
263
264
265 [0.8.2] - 6/5/2019
266 ------------------
267
268 ::
269
270    * Upgrade RMR due to a bug that was preventing rmr from init in kubernetes
271
272
273
274 [0.8.1] - 5/31/2019
275 -------------------
276
277 ::
278
279    * Run unit tests as part of docker build
280
281
282
283 [0.8.0] - 5/28/2019
284 -------------------
285
286 ::
287
288    * Convert docs to appropriate format
289    * Move rmr string to int mapping to a file
290
291
292
293 [0.7.2] - 5/24/2019
294 -------------------
295
296 ::
297
298    * Use tavern to test the actual running docker container
299    * Restructures the integration tests to run as a single tox command
300    * Re-ogranizes the README and splits out the Developers guide, which is not needed by users.
301
302
303 [0.7.1] - 5/23/2019
304 -------------------
305
306 ::
307
308    * Adds a defense mechanism against A1 getting queue-overflowed with messages A1 doesnt care about; A1 now ignores all incoming messages it's not waiting for, so it's queue size should now always be "tiny", i.e., never exceeding the number of valid requests it's waiting for ACKs back for
309    * Adds a test "bombarding" script that tests this
310
311
312 [0.7.0] - 5/22/19
313 -----------------
314
315 ::
316
317    * Main purpose of this change is to fix a potential race condition where A1 sends out M1 expecting ACK1, and while waiting for ACK1, sends out M2 expecting ACK2, but gets back ACK2, ACK1. Prior to this change, A1 may have eaten ACK2 and never fufilled the ACK1 request.
318    * Fix a bug in the unit tests (found using a fresh container with no RIC manifest!)
319    * Fix a (critical) bug in a1rmr due to a rename in the last iteration (RMR_ERR_RMR_RCV_RETRY_INTERVAL)
320    * Make unit tests faster by setting envs in tox
321    * Move to the now publically available rmr-python
322    * Return a 400 if am xapp does not expect a body, but the PUT provides one
323    * Adds a new test policy to the example RIC manifest and a new delayed receiver to test the aformentiond race condition
324
325
326 [0.6.0]
327 -------
328
329 ::
330
331    * Upgrade to rmr 0.10.0
332    * Fix bad api spec RE GET
333    * Fix a (big) bug where transactionid wasn't being checked, which wouldn't have worked on sending two policies to the same downstream policy handler
334
335
336 [0.5.1] - 5/13/2019
337 -------------------
338
339 ::
340
341    * Rip some testing structures out of here that should have been in rmr (those are now in rmr 0.9.0, upgrade to that)
342    * Run Python BLACK for formatting
343
344
345 [0.5.0] - 5/10/2019
346 -------------------
347
348 ::
349
350    * Fix a blocking execution bug by moving from rmr's timeout to a non blocking call + retry loop + asyncronous sleep
351    * Changes the ENV RMR_RCV_TIMEOUT to RMR_RCV_RETRY_INTERVAL
352
353
354 [0.4.0] - 5/9.2019
355 ------------------
356
357 ::
358
359    * Update to rmr 0.8.3
360    * Change 503 to 504 for the case where downstream does not reply, per recommendation
361    * Add a 502 with different reasons if the xapp replies but with a bad/malformed/missing status
362    * Make testing much more modular, in anticipating of moving some unit test functionality into rmr itself
363
364
365 [0.3.4] - 5/8/2019
366 ------------------
367
368 ::
369
370    * Crash immediately if manifest isn't mounted
371    * Add unit tests for utils
372    * Add missing lic
373
374
375 [0.3.3]
376 -------
377
378 ::
379
380    * Upgrade A1 to rmr 0.8.0
381    * Go from deb RMR installation to git
382    * Remove obnoxious receiver logging
383
384
385 [0.3.2]
386 -------
387
388 ::
389
390    * Upgrade A1 to rmr 0.6.0
391
392
393 [0.3.1]
394 -------
395
396 ::
397
398    * Add license headers
399
400
401 [0.3.0]
402 -------
403
404 ::
405
406    * Introduce RIC Manifest
407    * Move some testing functionality into a helper module
408    * Read the policyname to rmr type mapping from manifest
409    * Do PUT payload validation based on the manifest
410
411
412 [0.2.0]
413 -------
414
415 ::
416
417    * Bump rmr python dep version
418    * Include a Dockerized test receiver
419    * Stencil out the mising GET
420    * Update the OpenAPI
421    * Include a test docker compose file
422
423
424 [0.1.0]
425 -------
426
427 ::
428
429    * Initial Implementation