RICPLT-2954 Enhance error and info log writings
[ric-plt/submgr.git] / pkg / control / control.go
index 6c75063..db39f7b 100644 (file)
 
 package control
 
-/*
-#include <rmr/RIC_message_types.h>
-
-#cgo CFLAGS: -I../
-#cgo LDFLAGS: -lrmr_nng -lnng
-*/
 import "C"
 
-
 import (
-  "gerrit.o-ran-sc.org/r/ric-plt/xapp-frame/pkg/xapp"
-  "errors"
-  "strconv"
+       "errors"
+       rtmgrclient "gerrit.o-ran-sc.org/r/ric-plt/submgr/pkg/rtmgr_client"
+       rtmgrhandle "gerrit.o-ran-sc.org/r/ric-plt/submgr/pkg/rtmgr_client/handle"
+       "gerrit.o-ran-sc.org/r/ric-plt/xapp-frame/pkg/xapp"
+       httptransport "github.com/go-openapi/runtime/client"
+       "github.com/go-openapi/strfmt"
+       "github.com/spf13/viper"
+       "math/rand"
+       "time"
+       "sync"  
 )
 
+var subReqTime time.Duration = 2 * time.Second
+var SubDelReqTime time.Duration = 2 * time.Second
+
 type Control struct {
-  e2ap *E2ap
-  registry *Registry
+       e2ap        *E2ap
+       registry    *Registry
+       rtmgrClient *RtmgrClient
+       tracker     *Tracker
+       timerMap        *TimerMap
+       rmrSendMutex *sync.Mutex        
+}
+
+type RMRMeid struct {
+       PlmnID string
+       EnbID  string
+       RanName string
+}
+
+var seedSN uint16
+
+const (
+       CREATE Action = 0
+       MERGE  Action = 1
+       NONE   Action = 2
+       DELETE Action = 3
+)
+
+func init() {
+       xapp.Logger.Info("SUBMGR /ric-plt-submgr:r3-test-v4")
+       viper.AutomaticEnv()
+       viper.SetEnvPrefix("submgr")
+       viper.AllowEmptyEnv(true)
+       seedSN = uint16(viper.GetInt("seed_sn"))
+       if seedSN == 0 {
+               rand.Seed(time.Now().UnixNano())
+               seedSN = uint16(rand.Intn(65535))
+       }
+       if seedSN > 65535 {
+               seedSN = 0
+       }
+       xapp.Logger.Info("SUBMGR: Initial Sequence Number: %v", seedSN)
 }
 
 func NewControl() Control {
-  return Control{new(E2ap),new(Registry)}
+       registry := new(Registry)
+       registry.Initialize(seedSN)
+
+       tracker := new(Tracker)
+       tracker.Init()
+
+       timerMap := new(TimerMap)
+       timerMap.Init()
+
+       rmrSendMutex := &sync.Mutex{}
+
+       transport := httptransport.New(viper.GetString("rtmgr.HostAddr")+":"+viper.GetString("rtmgr.port"), viper.GetString("rtmgr.baseUrl"), []string{"http"})
+       client := rtmgrclient.New(transport, strfmt.Default)
+       handle := rtmgrhandle.NewProvideXappSubscriptionHandleParamsWithTimeout(10 * time.Second)
+       deleteHandle := rtmgrhandle.NewDeleteXappSubscriptionHandleParamsWithTimeout(10 * time.Second)
+       rtmgrClient := RtmgrClient{client, handle, deleteHandle}
+
+       return Control{new(E2ap), registry, &rtmgrClient, tracker, timerMap, rmrSendMutex}
 }
 
 func (c *Control) Run() {
-  xapp.Run(c)
-}
-
-func (c *Control) Consume(mtype, sub_id int, len int, payload []byte) (err error) {
-  switch mtype {
-  case C.RIC_SUB_REQ:
-    err = c.handleSubscriptionRequest(&RmrDatagram{mtype, sub_id, payload})
-  case C.RIC_SUB_RESP:
-    err = c.handleSubscriptionResponse(&RmrDatagram{mtype, sub_id, payload})
-  default:
-    err = errors.New("Message Type "+strconv.Itoa(mtype)+" discarded")
-  }
-  return
-}
-
-func (c *Control) rmrSend(datagram *RmrDatagram) (err error) {
-  if !xapp.Rmr.Send(datagram.MessageType, datagram.SubscriptionId, len(datagram.Payload), datagram.Payload) {
-    err = errors.New("rmr.Send() failed")
-  }
-  return
-}
-
-func (c *Control) handleSubscriptionRequest(datagram *RmrDatagram) ( err error) {
-  content, err := c.e2ap.GetPayloadContent(datagram.Payload)
-  xapp.Logger.Info("Subscription Request received: %v", content)
-  new_sub_id := c.registry.GetSubscriptionId()
-  payload, err := c.e2ap.SetSubscriptionSequenceNumber(datagram.Payload, new_sub_id)
-  if err != nil {
-    xapp.Logger.Error("Unable to set Subscription Sequence Number in Payload due to: "+ err.Error())
-    return
-  }
-  xapp.Logger.Info("New Subscription Accepted, Forwarding to E2T")
-  c.rmrSend(&RmrDatagram{C.RIC_SUB_REQ , new_sub_id, payload})
-  return
-}
-
-func (c *Control) handleSubscriptionResponse(datagram *RmrDatagram) ( err error) {
-  content, err := c.e2ap.GetPayloadContent(datagram.Payload)
-  xapp.Logger.Info("Subscription Response received: %v", content)
-  return
-}
\ No newline at end of file
+       xapp.Run(c)
+}
+
+func (c *Control) rmrSend(params *xapp.RMRParams) (err error) {
+       status := false
+       i := 1
+       for ; i <= 10 && status == false; i++ { 
+               c.rmrSendMutex.Lock()
+               status = xapp.Rmr.Send(params, false)
+               c.rmrSendMutex.Unlock()
+               if status == false {
+                       xapp.Logger.Info("rmr.Send() failed. Retry count %v, Mtype: %v, SubId: %v, Xid %s",i, params.Mtype, params.SubId, params.Xid)
+                       time.Sleep(500 * time.Millisecond)
+               }
+       }
+       if status == false {
+               err = errors.New("rmr.Send() failed")
+               xapp.Rmr.Free(params.Mbuf)
+       }
+       return
+}
+
+func (c *Control) rmrReplyToSender(params *xapp.RMRParams) (err error) {
+       c.rmrSend(params)
+       return
+}
+
+func (c *Control) Consume(msg *xapp.RMRParams) (err error) {
+       switch msg.Mtype {
+       case xapp.RICMessageTypes["RIC_SUB_REQ"]:
+               go c.handleSubscriptionRequest(msg)
+       case xapp.RICMessageTypes["RIC_SUB_RESP"]:
+               go c.handleSubscriptionResponse(msg)
+       case xapp.RICMessageTypes["RIC_SUB_FAILURE"]:
+               go c.handleSubscriptionFailure(msg)
+       case xapp.RICMessageTypes["RIC_SUB_DEL_REQ"]:
+               go c.handleSubscriptionDeleteRequest(msg)
+       case xapp.RICMessageTypes["RIC_SUB_DEL_RESP"]:
+               go c.handleSubscriptionDeleteResponse(msg)
+       default:
+               xapp.Logger.Info("Unknown Message Type '%d', discarding", msg.Mtype)
+       }
+       return nil
+}
+
+func (c *Control) handleSubscriptionRequest(params *xapp.RMRParams) {
+       xapp.Logger.Info("SubReq received from Src: %s, Mtype: %v, SubId: %v, Xid: %s, Meid: %v",params.Src, params.Mtype, params.SubId, params.Xid, params.Meid)
+       xapp.Rmr.Free(params.Mbuf)
+       params.Mbuf = nil
+
+       /* Reserve a sequence number and set it in the payload */
+       newSubId, isIdValid := c.registry.ReserveSequenceNumber()
+       if isIdValid != true {
+               xapp.Logger.Error("SubReq: Failed to reserve sequence number. Dropping this msg. SubId: %v, Xid: %s",params.SubId, params.Xid)
+               return 
+       }
+
+       err := c.e2ap.SetSubscriptionRequestSequenceNumber(params.Payload, newSubId)
+       if err != nil {
+               xapp.Logger.Error("SubReq: Unable to set Sequence Number in Payload. Dropping this msg. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+
+       srcAddr, srcPort, err := c.rtmgrClient.SplitSource(params.Src)
+       if err != nil {
+               xapp.Logger.Error("SubReq: Failed to update routing-manager. Dropping this msg. Err: %s, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+
+       /* Create transatcion records for every subscription request */
+       xactKey := TransactionKey{newSubId, CREATE}
+       xactValue := Transaction{*srcAddr, *srcPort, params}
+       err = c.tracker.TrackTransaction(xactKey, xactValue)
+       if err != nil {
+               xapp.Logger.Error("SubReq: Failed to create transaction record. Dropping this msg. Err: %v SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+
+       /* Update routing manager about the new subscription*/
+       subRouteAction := SubRouteInfo{CREATE, *srcAddr, *srcPort, newSubId}
+       xapp.Logger.Info("SubReq: Starting routing manager update. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       err = c.rtmgrClient.SubscriptionRequestUpdate(subRouteAction)
+       if err != nil {
+               xapp.Logger.Error("SubReq: Failed to update routing manager. Dropping this SubReq msg. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+
+       // Setting new subscription ID in the RMR header
+       params.SubId = int(newSubId)
+       xapp.Logger.Info("Forwarding SubReq to E2T: Mtype: %v, SubId: %v, Xid %s, Meid %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       err = c.rmrSend(params)
+       if err != nil {
+               xapp.Logger.Error("SubReq: Failed to send request to E2T %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       } /*else {
+               c.timerMap.StartTimer(newSubId, subReqTime, c.handleSubscriptionRequestTimer)
+       }*/
+       xapp.Logger.Debug("SubReq: Debugging transaction table = %v", c.tracker.transactionTable)
+       return
+}
+
+func (c *Control) handleSubscriptionResponse(params *xapp.RMRParams) {
+       xapp.Logger.Info("SubResp received from Src: %s, Mtype: %v, SubId: %v, Meid: %v",params.Src, params.Mtype, params.SubId, params.Meid)
+       xapp.Rmr.Free(params.Mbuf)
+       params.Mbuf = nil
+
+       payloadSeqNum, err := c.e2ap.GetSubscriptionResponseSequenceNumber(params.Payload)
+       if err != nil {
+               xapp.Logger.Error("SubResp: Unable to get Sequence Number from Payload. Dropping this msg. Err: %v, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubResp: Received payloadSeqNum: %v",payloadSeqNum)
+
+       if !c.registry.IsValidSequenceNumber(payloadSeqNum) {
+               xapp.Logger.Error("SubResp: Unknown payloadSeqNum. Dropping this msg. PayloadSeqNum: %v, SubId: %v", payloadSeqNum, params.SubId)               
+               return
+       }
+
+//     c.timerMap.StopTimer(payloadSeqNum)
+
+       c.registry.setSubscriptionToConfirmed(payloadSeqNum)
+       var transaction Transaction
+       transaction, err = c.tracker.RetriveTransaction(payloadSeqNum, CREATE)
+       if err != nil {
+               xapp.Logger.Error("SubResp: Failed to retrive transaction record. Dropping this msg. Err: %V, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubResp: SubId: %v, from address: %v:%v. Retrieved old subId", int(payloadSeqNum), transaction.XappInstanceAddress, transaction.XappPort)
+
+    params.SubId = int(payloadSeqNum)
+    params.Xid = transaction.OrigParams.Xid
+       
+       xapp.Logger.Info("SubResp: Forwarding Subscription Response to xApp Mtype: %v, SubId: %v, Meid: %v",params.Mtype, params.SubId, params.Meid)
+       err = c.rmrReplyToSender(params)
+       if err != nil {
+               xapp.Logger.Error("SubResp: Failed to send response to xApp. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       }
+
+       xapp.Logger.Info("SubResp: SubId: %v, from address: %v:%v. Deleting transaction record", int(payloadSeqNum), transaction.XappInstanceAddress, transaction.XappPort)
+       transaction, err = c.tracker.completeTransaction(payloadSeqNum, CREATE)
+       if err != nil {
+               xapp.Logger.Error("SubResp: Failed to delete transaction record. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+       return
+}
+
+func (c *Control) handleSubscriptionFailure(params *xapp.RMRParams) {
+       xapp.Logger.Info("SubFail received from Src: %s, Mtype: %v, SubId: %v, Meid: %v",params.Src, params.Mtype, params.SubId, params.Meid)
+       xapp.Rmr.Free(params.Mbuf)
+       params.Mbuf = nil
+
+       payloadSeqNum, err := c.e2ap.GetSubscriptionFailureSequenceNumber(params.Payload)
+       if err != nil {
+               xapp.Logger.Error("SubFail: Unable to get Sequence Number from Payload. Dropping this msg. Err: %v, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubFail: Received payloadSeqNum: %v", payloadSeqNum)
+
+//     c.timerMap.StopTimer(payloadSeqNum)
+
+       var transaction Transaction
+       transaction, err = c.tracker.RetriveTransaction(payloadSeqNum, CREATE)
+       if  err != nil {
+               xapp.Logger.Error("SubFail: Failed to retrive transaction record. Dropping this msg. Err: %v, SubId: %v: %s", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubFail: SubId: %v, from address: %v:%v. Forwarding response to xApp", int(payloadSeqNum), transaction.XappInstanceAddress, transaction.XappPort)
+
+       params.SubId = int(payloadSeqNum)
+       params.Xid = transaction.OrigParams.Xid
+
+       xapp.Logger.Info("Forwarding SubFail to xApp: Mtype: %v, SubId: %v, Xid: %v, Meid: %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       err = c.rmrReplyToSender(params)
+       if err != nil {
+               xapp.Logger.Error("Failed to send response to xApp. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       }
+
+       time.Sleep(3 * time.Second)
+
+       xapp.Logger.Info("SubFail: Starting routing manager update. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       subRouteAction := SubRouteInfo{CREATE, transaction.XappInstanceAddress, transaction.XappPort, payloadSeqNum}
+       err = c.rtmgrClient.SubscriptionRequestUpdate(subRouteAction)
+       if err != nil {
+               xapp.Logger.Error("SubFail: Failed to update routing manager. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       }
+
+       xapp.Logger.Info("SubFail: Deleting trancaction record. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       if c.registry.releaseSequenceNumber(payloadSeqNum) {
+               transaction, err = c.tracker.completeTransaction(payloadSeqNum, CREATE)
+               if err != nil {
+                       xapp.Logger.Error("SubFail: Failed to delete transaction record. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+                       return
+               }
+       } else {
+               xapp.Logger.Error("SubFail: Failed to release sequency number. SubId: %v, Xid: %s", params.SubId, params.Xid)
+               return
+       }
+       return
+}
+
+func (c *Control) handleSubscriptionRequestTimer(subId uint16) {
+       xapp.Logger.Info("Subscription Request timer expired. SubId: %v",subId)
+/*     
+       transaction, err := c.tracker.completeTransaction(subId, CREATE)
+       if err != nil {
+               xapp.Logger.Error("Failed to delete a Subscription Request transaction record due to %v", err)
+               return
+       }
+       xapp.Logger.Info("SubId: %v, Xid %v, Meid: %v",subId, transaction.OrigParams.Xid, transaction.OrigParams.Meid)
+
+       var params xapp.RMRParams
+       params.Mtype = 12012 //xapp.RICMessageTypes["RIC_SUB_FAILURE"]
+       params.SubId = int(subId)
+       params.Meid = transaction.OrigParams.Meid
+       params.Xid = transaction.OrigParams.Xid
+       payload := []byte("40C9408098000003EA7E00050000010016EA6300020021EA6E00808180EA6F000400000000EA6F000400010040EA6F000400020080EA6F0004000300C0EA6F000400040100EA6F000400050140EA6F000400060180EA6F0004000701C0EA6F000400080200EA6F000400090240EA6F0004000A0280EA6F0004000B02C0EA6F0004000C0300EA6F0004000D0340EA6F0004000E0380EA6F0004000F03C0")
+       params.PayloadLen = len(payload)
+       params.Payload = payload
+
+       xapp.Logger.Info("Forwarding Subscription Failure to xApp: Mtype: %v, SubId: %v, Xid: %s, Meid: %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       err = c.rmrReplyToSender(&params)
+       if err != nil {
+               xapp.Logger.Error("Failed to send response to requestor %v. SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       }
+*/
+/*
+       time.Sleep(3 * time.Second)
+
+       xapp.Logger.Info("Subscription ID: %v, from address: %v:%v. Deleting transaction record", int(subId), transaction.XappInstanceAddress, transaction.XappPort)
+
+       xapp.Logger.Info("Starting routing manager update")
+       subRouteAction := SubRouteInfo{DELETE, transaction.XappInstanceAddress, transaction.XappPort, payloadSeqNum}
+       c.rtmgrClient.SubscriptionRequestUpdate(subRouteAction)
+
+       xapp.Logger.Info("Deleting trancaction record")
+       if c.registry.releaseSequenceNumber(payloadSeqNum) {
+               transaction, err = c.tracker.completeTransaction(payloadSeqNum, CREATE)
+               if err != nil {
+                       xapp.Logger.Error("Failed to delete a Subscription Request transaction record due to %v", err)
+                       return
+               }
+       }
+*/
+       return
+}
+
+func (act Action) String() string {
+       actions := [...]string{
+               "CREATE",
+               "MERGE",
+               "NONE",
+               "DELETE",
+       }
+
+       if act < CREATE || act > DELETE {
+               return "Unknown"
+       }
+       return actions[act]
+}
+
+func (act Action) valid() bool {
+       switch act {
+       case CREATE, MERGE, DELETE:
+               return true
+       default:
+               return false
+       }
+}
+
+func (c *Control) handleSubscriptionDeleteRequest(params *xapp.RMRParams) {
+       xapp.Logger.Info("SubDelReq received from Src: %s, Mtype: %v, SubId: %v, Xid: %s, Meid: %v",params.Src, params.Mtype, params.SubId, params.Xid, params.Meid)
+       xapp.Rmr.Free(params.Mbuf)
+       params.Mbuf = nil
+
+       payloadSeqNum, err := c.e2ap.GetSubscriptionDeleteRequestSequenceNumber(params.Payload)
+       if err != nil {
+               xapp.Logger.Error("SubDelReq: Unable to get Sequence Number from Payload. Dropping this msg. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+       xapp.Logger.Info("SubDelReq: Received payloadSeqNum: %v", payloadSeqNum)
+
+       if c.registry.IsValidSequenceNumber(payloadSeqNum) {
+               c.registry.deleteSubscription(payloadSeqNum)
+               err = c.trackDeleteTransaction(params, payloadSeqNum)
+               if err != nil {
+                       xapp.Logger.Error("SubDelReq: Failed to create transaction record. Dropping this msg. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+                       return
+               }
+       } else {
+               xapp.Logger.Error("SubDelReq: Not valid sequence number. Dropping this msg. SubId: %v, Xid: %s", params.SubId, params.Xid)
+               return
+       }
+       
+       xapp.Logger.Info("SubDelReq: Forwarding Request to E2T. Mtype: %v, SubId: %v, Xid: %s, Meid: %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       c.rmrSend(params)
+       if err != nil {
+               xapp.Logger.Error("SubDelReq: Failed to send request to E2T. Err %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       } /*else {
+               c.timerMap.StartTimer(payloadSeqNum, SubDelReqTime, c.handleSubscriptionDeleteRequestTimer)
+       }*/
+       return
+}
+
+func (c *Control) trackDeleteTransaction(params *xapp.RMRParams, payloadSeqNum uint16) (err error) {
+       srcAddr, srcPort, err := c.rtmgrClient.SplitSource(params.Src)
+       if err != nil {
+               xapp.Logger.Error("SubDelReq: Failed to update routing-manager. Err: %s, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       }
+       xactKey := TransactionKey{payloadSeqNum, DELETE}
+       xactValue := Transaction{*srcAddr, *srcPort, params}
+       err = c.tracker.TrackTransaction(xactKey, xactValue)
+       return
+}
+
+func (c *Control) handleSubscriptionDeleteResponse(params *xapp.RMRParams) (err error) {
+       xapp.Logger.Info("SubDelResp received from Src: %s, Mtype: %v, SubId: %v, Meid: %v",params.Src, params.Mtype, params.SubId, params.Meid)
+       xapp.Rmr.Free(params.Mbuf)
+       params.Mbuf = nil
+
+       payloadSeqNum, err := c.e2ap.GetSubscriptionDeleteResponseSequenceNumber(params.Payload)
+       if err != nil {
+               xapp.Logger.Error("SubDelResp: Unable to get Sequence Number from Payload. Dropping this msg. Err: %, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubDelResp: Received payloadSeqNum: %v", payloadSeqNum)
+
+//     c.timerMap.StopTimer(payloadSeqNum)
+       
+       var transaction Transaction
+       transaction, err = c.tracker.RetriveTransaction(payloadSeqNum, DELETE)
+       if  err != nil {
+               xapp.Logger.Error("SubDelResp: Failed to retrive transaction record. Dropping this msg. Err: %v, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubDelResp: SubId: %v, from address: %v:%v. Forwarding response to xApp", int(payloadSeqNum), transaction.XappInstanceAddress, transaction.XappPort)
+
+    params.SubId = int(payloadSeqNum)
+    params.Xid = transaction.OrigParams.Xid
+       xapp.Logger.Info("Forwarding SubDelResp to xApp: Mtype: %v, SubId: %v, Xid: %v, Meid: %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       err = c.rmrReplyToSender(params)
+       if err != nil {
+               xapp.Logger.Error("SubDelResp: Failed to send response to xApp. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+//             return
+       }
+
+       time.Sleep(3 * time.Second)
+
+       xapp.Logger.Info("SubDelResp: Starting routing manager update. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       subRouteAction := SubRouteInfo{DELETE, transaction.XappInstanceAddress, transaction.XappPort, payloadSeqNum}
+       err = c.rtmgrClient.SubscriptionRequestUpdate(subRouteAction)
+       if err != nil {
+               xapp.Logger.Error("SubDelResp: Failed to update routing manager. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+
+       xapp.Logger.Info("SubDelResp: Deleting trancaction record. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       if c.registry.releaseSequenceNumber(payloadSeqNum) {
+               transaction, err = c.tracker.completeTransaction(payloadSeqNum, DELETE)
+               if err != nil {
+                       xapp.Logger.Error("SubDelResp: Failed to delete transaction record. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+                       return
+               }
+       } else {
+               xapp.Logger.Error("SubDelResp: Failed to release sequency number. SubId: %v, Xid: %s", params.SubId, params.Xid)
+               return
+       }
+       return
+}
+
+func (c *Control) handleSubscriptionDeleteFailure(params *xapp.RMRParams) {
+       xapp.Logger.Info("SubDelFail received from Src: %s, Mtype: %v, SubId: %v, Meid: %v",params.Src, params.Mtype, params.SubId, params.Meid)
+       xapp.Rmr.Free(params.Mbuf)
+       params.Mbuf = nil
+
+       payloadSeqNum, err := c.e2ap.GetSubscriptionDeleteFailureSequenceNumber(params.Payload)
+       if err != nil {
+               xapp.Logger.Error("SubDelFail: Unable to get Sequence Number from Payload. Dropping this msg. Err: %, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubDelFail: Received payloadSeqNum: %v", payloadSeqNum)
+
+//     c.timerMap.StopTimer(payloadSeqNum)
+
+       var transaction Transaction
+       transaction, err = c.tracker.RetriveTransaction(payloadSeqNum, DELETE)
+       if  err != nil {
+               xapp.Logger.Error("SubDelFail: Failed to retrive transaction record. Dropping msg. Err %v, SubId: %v", err, params.SubId)
+               return
+       }
+       xapp.Logger.Info("SubDelFail: SubId: %v, from address: %v:%v. Forwarding response to xApp", int(payloadSeqNum), transaction.XappInstanceAddress, transaction.XappPort)
+
+    params.SubId = int(payloadSeqNum)
+    params.Xid = transaction.OrigParams.Xid
+       xapp.Logger.Info("Forwarding SubDelFail to xApp: Mtype: %v, SubId: %v, Xid: %v, Meid: %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       err = c.rmrReplyToSender(params)
+       if err != nil {
+               xapp.Logger.Error("Failed to send SubDelFail to xApp. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+//             return
+       }
+
+       time.Sleep(3 * time.Second)
+
+       xapp.Logger.Info("SubDelFail: Starting routing manager update. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       subRouteAction := SubRouteInfo{DELETE, transaction.XappInstanceAddress, transaction.XappPort, payloadSeqNum}
+       c.rtmgrClient.SubscriptionRequestUpdate(subRouteAction)
+       if err != nil {
+               xapp.Logger.Error("SubDelFail: Failed to update routing manager. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+
+       xapp.Logger.Info("SubDelFail: Deleting trancaction record. SubId: %v, Xid: %s", params.SubId, params.Xid)
+       if c.registry.releaseSequenceNumber(payloadSeqNum) {
+               transaction, err = c.tracker.completeTransaction(payloadSeqNum, DELETE)
+               if err != nil {
+                       xapp.Logger.Error("SubDelFail: Failed to delete transaction record. Err: %v, SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+                       return
+               }
+       } else {
+               xapp.Logger.Error("SubDelFail: Failed to release sequency number. SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+               return
+       }
+       return
+}
+
+func (c *Control) handleSubscriptionDeleteRequestTimer(subId uint16) {
+       xapp.Logger.Info("Subscription Delete Request timer expired. SubId: %v",subId)
+/*     
+       transaction, err := c.tracker.completeTransaction(subId, DELETE)
+       if err != nil {
+               xapp.Logger.Error("Failed to delete a Subscription Delete Request transaction record due to %v", err)
+               return
+       }
+       xapp.Logger.Info("SubId: %v, Xid %v, Meid: %v",subId, transaction.OrigParams.Xid, transaction.OrigParams.Meid)
+
+       var params xapp.RMRParams
+       params.Mtype = 12022 //xapp.RICMessageTypes["RIC_SUB_DEL_FAILURE"]
+       params.SubId = int(subId)
+       params.Meid = transaction.OrigParams.Meid
+       params.Xid = transaction.OrigParams.Xid
+       payload := []byte("40CA4018000003EA7E00050000010016EA6300020021EA74000200C0")
+       params.PayloadLen = len(payload)
+       params.Payload = payload
+
+       xapp.Logger.Info("Forwarding Subscription Delete Failure to xApp: Mtype: %v, SubId: %v, Xid: %s, Meid: %v",params.Mtype, params.SubId, params.Xid, params.Meid)
+       err = c.rmrReplyToSender(&params)
+       if err != nil {
+               xapp.Logger.Error("Failed to send response to requestor %v. SubId: %v, Xid: %s", err, params.SubId, params.Xid)
+       }
+*/     
+/*
+       time.Sleep(3 * time.Second)
+       xapp.Logger.Info("Subscription ID: %v, from address: %v:%v. Deleting transaction record", int(subId), transaction.XappInstanceAddress, transaction.XappPort)
+
+       xapp.Logger.Info("Starting routing manager update")
+       subRouteAction := SubRouteInfo{DELETE, transaction.XappInstanceAddress, transaction.XappPort, payloadSeqNum}
+       c.rtmgrClient.SubscriptionRequestUpdate(subRouteAction)
+
+       xapp.Logger.Info("Deleting trancaction record")
+       if c.registry.releaseSequenceNumber(payloadSeqNum) {
+               transaction, err = c.tracker.completeTransaction(payloadSeqNum, DELETE)
+               if err != nil {
+                       xapp.Logger.Error("Failed to delete a Subscription Delete Request transaction record due to %v", err)
+                       return
+               }
+       }
+*/
+       return
+       }