392feb732d3e1271b2e6d0d62b0ced10e61419ca
[ric-plt/lib/rmr.git] / src / nanomsg / src / rmr.c
1 // :vi sw=4 ts=4 noet:
2 /*
3 ==================================================================================
4         Copyright (c) 2019 Nokia
5         Copyright (c) 2018-2019 AT&T Intellectual Property.
6
7    Licensed under the Apache License, Version 2.0 (the "License");
8    you may not use this file except in compliance with the License.
9    You may obtain a copy of the License at
10
11            http://www.apache.org/licenses/LICENSE-2.0
12
13    Unless required by applicable law or agreed to in writing, software
14    distributed under the License is distributed on an "AS IS" BASIS,
15    WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
16    See the License for the specific language governing permissions and
17    limitations under the License.
18 ==================================================================================
19 */
20
21 /*
22         Mnemonic:       rmr.c
23         Abstract:       The bulk of the ric message routing library which is built upon
24                                 the older nanomsg messaging transport mehhanism.
25
26                                 To "hide" internal functions the choice was made to implement them
27                                 all as static functions. This means that we include nearly
28                                 all of our modules here as 90% of the library is not visible to
29                                 the outside world.
30
31         Author:         E. Scott Daniels
32         Date:           28 November 2018
33 */
34
35 #include <ctype.h>
36 #include <stdio.h>
37 #include <stdlib.h>
38 #include <netdb.h>
39 #include <errno.h>
40 #include <string.h>
41 #include <errno.h>
42 #include <pthread.h>
43 #include <unistd.h>
44 #include <stdint.h>
45 #include <time.h>
46 #include <arpa/inet.h>
47
48 #include <nanomsg/nn.h>
49 #include <nanomsg/tcp.h>
50 #include <nanomsg/pair.h>
51 #include <nanomsg/pipeline.h>
52 #include <nanomsg/pubsub.h>
53
54 #include "rmr.h"                                // things the users see
55 #include "rmr_agnostic.h"               // headers agnostic to the underlying transport mechanism
56 #include "rmr_private.h"                // things that we need too
57 #include "rmr_symtab.h"
58
59 #include "ring_static.c"                // message ring support
60 #include "rt_generic_static.c"  // generic route table (not nng/nano specific)
61 #include "rtable_static.c"              // route table things   (nano specific)
62 #include "rtc_static.c"                 // common rt collector
63 #include "tools_static.c"
64 #include "sr_static.c"                  // send/receive static functions
65 #include "wormholes.c"                  // external wormhole api, and it's static functions (must be LAST)
66
67 // ------------------------------------------------------------------------------------------------------
68
69 /*
70         Clean up a context.
71 */
72 static void free_ctx( uta_ctx_t* ctx ) {
73         if( ctx ) {
74                 if( ctx->rtg_addr ) {
75                         free( ctx->rtg_addr );
76                 }
77         }
78 }
79
80 // --------------- public functions --------------------------------------------------------------------------
81
82 /*
83         Set the receive timeout to time (ms). A value of 0 is the same as a non-blocking
84         receive and -1 is block for ever.
85         Returns the nn value (0 on success <0 on error).
86 */
87 extern int rmr_set_rtimeout( void* vctx, int time ) {
88         uta_ctx_t* ctx;
89
90         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
91                 errno = EINVAL;
92                 return -1;
93         }
94
95         if( ctx->last_rto == time ) {
96                 return 0;
97         }
98
99         ctx->last_rto = time;
100
101         return nn_setsockopt( ctx->nn_sock, NN_SOL_SOCKET, NN_RCVTIMEO, &time, sizeof( time ) );
102 }
103
104 /*
105         Deprecated -- use rmr_set_rtimeout()
106 */
107 extern int rmr_rcv_to( void* vctx, int time ) {
108         return rmr_rcv_to( vctx, time );
109 }
110
111 /*
112         Set the send timeout to time. If time >1000 we assume the time is milliseconds,
113         else we assume seconds. Setting -1 is always block.
114         Returns the nn value (0 on success <0 on error).
115 */
116 extern int rmr_set_stimeout( void* vctx, int time ) {
117         uta_ctx_t* ctx;
118
119         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
120                 errno = EINVAL;
121                 return -1;
122         }
123
124         if( time > 0 ) {
125                 if( time < 1000 ) {
126                         time = time * 1000;                     // assume seconds, nn wants ms
127                 }
128         }
129
130         return nn_setsockopt( ctx->nn_sock, NN_SOL_SOCKET, NN_SNDTIMEO, &time, sizeof( time ) );
131 }
132
133 /*
134         Deprecated -- use rmr_set_stimeout()
135 */
136 extern int rmr_send_to( void* vctx, int time ) {
137         return rmr_send_to( vctx, time );
138 }
139
140 /*
141         Returns the size of the payload (bytes) that the msg buffer references.
142         Len in a message is the number of bytes which were received, or should
143         be transmitted, however, it is possible that the mbuf was allocated
144         with a larger payload space than the payload length indicates; this
145         function returns the absolute maximum space that the user has available
146         in the payload. On error (bad msg buffer) -1 is returned and errno should
147         indicate the rason.
148 */
149 extern int rmr_payload_size( rmr_mbuf_t* msg ) {
150         if( msg == NULL || msg->header == NULL ) {
151                 errno = EINVAL;
152                 return -1;
153         }
154
155         errno = 0;
156         return msg->alloc_len - RMR_HDR_LEN( msg->header );                     // transport buffer less header and other data bits
157 }
158
159 /*
160         Allocates a send message as a zerocopy message allowing the underlying message protocol
161         to send the buffer without copy.
162 */
163 extern rmr_mbuf_t* rmr_alloc_msg( void* vctx, int size ) {
164         uta_ctx_t*      ctx;
165         rmr_mbuf_t*     m;
166
167         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
168                 return NULL;
169         }
170
171         m = alloc_zcmsg( ctx, NULL, size, 0, DEF_TR_LEN );
172         return  m;
173 }
174
175 /*
176         Allocates a send message as a zerocopy message allowing the underlying message protocol
177         to send the buffer without copy. In addition, a trace data field of tr_size will be
178         added and the supplied data coppied to the buffer before returning the message to
179         the caller.
180 */
181 extern rmr_mbuf_t* rmr_tralloc_msg( void* vctx, int size, int tr_size, unsigned const char* data ) {
182         uta_ctx_t*      ctx;
183         rmr_mbuf_t*     m;
184         int state;
185
186         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
187                 return NULL;
188         }
189
190         m = alloc_zcmsg( ctx, NULL, size, 0, tr_size );                         // alloc with specific tr size
191         if( m != NULL ) {
192                 state = rmr_set_trace( m, data, tr_size );                              // roll their data in
193                 if( state != tr_size ) {
194                         m->state = RMR_ERR_INITFAILED;
195                 }
196         }
197
198         return  m;
199 }
200
201 /*
202         Need an external path to the realloc static function as it's called by an
203         outward facing mbuf api function.
204 */
205 extern rmr_mbuf_t* rmr_realloc_msg( rmr_mbuf_t* msg, int new_tr_size ) {
206         return realloc_msg( msg, new_tr_size );
207 }
208
209 /*
210         Return the message to the available pool, or free it outright.
211 */
212 extern void rmr_free_msg( rmr_mbuf_t* mbuf ) {
213         if( mbuf == NULL ) {
214                 return;
215         }
216
217         if( mbuf->header ) {
218                 if( mbuf->flags & MFL_ZEROCOPY ) {
219                         nn_freemsg( mbuf->header );                             // must let nano free it
220                 } else {
221                         free( mbuf->header );
222                 }
223         }
224
225         free( mbuf );
226 }
227
228 /*
229         Accept a message and send it to an endpoint based on message type.
230         Allocates a new message buffer for the next send. If a message type has
231         more than one group of endpoints defined, then the message will be sent
232         in round robin fashion to one endpoint in each group.
233
234         CAUTION: this is a non-blocking send.  If the message cannot be sent, then
235                 it will return with an error and errno set to eagain. If the send is
236                 a limited fanout, then the returned status is the status of the last
237                 send attempt.
238 */
239 extern rmr_mbuf_t* rmr_send_msg( void* vctx, rmr_mbuf_t* msg ) {
240         int nn_sock;                            // endpoint socket for send
241         uta_ctx_t*      ctx;
242         int     group;                                  // selected group to get socket for
243         int send_again;                         // true if the message must be sent again
244         rmr_mbuf_t*     clone_m;                // cloned message for an nth send
245         uint64_t key;                           // lookup key is now subid and mtype
246         int max_rt = 1000;
247
248         if( (ctx = (uta_ctx_t *) vctx) == NULL || msg == NULL ) {               // bad stuff, bail fast
249                 errno = EINVAL;                                                                                         // if msg is null, this is their clue
250                 if( msg != NULL ) {
251                         msg->state = RMR_ERR_BADARG;
252                         errno = EINVAL;                                                                                 // must ensure it's not eagain
253                 }
254                 return msg;
255         }
256
257         errno = 0;                                                                                                      // clear; nano might set, but ensure it's not left over if it doesn't
258         if( msg->header == NULL ) {
259                 fprintf( stderr, "[ERR] rmr_send_msg: message had no header\n" );
260                 msg->state = RMR_ERR_NOHDR;
261                 errno = EBADMSG;                                                                                // must ensure it's not eagain
262                 return msg;
263         }
264
265         send_again = 1;                                                                                 // force loop entry
266         group = 0;                                                                                              // always start with group 0
267
268         key = build_rt_key( msg->sub_id, msg->mtype );                  // what we need to find the route table entry
269         while( send_again ) {
270                 max_rt = 1000;
271                 nn_sock = uta_epsock_rr( ctx->rtable, key, group, &send_again );                // round robin select endpoint; again set if mult groups
272                 if( DEBUG ) fprintf( stderr, "[DBUG] send msg: type=%d again=%d group=%d socket=%d len=%d\n",
273                                 msg->mtype, send_again, group, nn_sock, msg->len );
274                 group++;
275
276                 if( nn_sock < 0 ) {
277                         msg->state = RMR_ERR_NOENDPT;
278                         errno = ENXIO;                                                                                  // must ensure it's not eagain
279                         return msg;                                                                                             // caller can resend (maybe) or free
280                 }
281
282                 if( send_again ) {
283                         clone_m = clone_msg( msg );                                                             // must make a copy as once we send this message is not available
284                         if( DEBUG ) fprintf( stderr, "[DBUG] msg cloned: type=%d sub_id=%d len=%d\n", msg->mtype, msg->sub_id, msg->len );
285                         msg->flags |= MFL_NOALLOC;                                                              // send should not allocate a new buffer
286                         msg = send_msg( ctx, msg, nn_sock );                                    // do the hard work, msg should be nil on success
287                         while( max_rt > 0 &&  msg && msg->state == RMR_ERR_RETRY ) {
288                                 msg = send_msg( ctx, msg, nn_sock );
289                                 max_rt--;
290                         }
291
292                         msg = clone_m;                                                                                  // clone will be the next to send
293                 } else {
294                         msg = send_msg( ctx, msg, nn_sock );                                    // send the last, and allocate a new buffer; drops the clone if it was
295                         while( max_rt > 0 &&  msg && msg->state == RMR_ERR_RETRY ) {
296                                 msg = send_msg( ctx, msg, nn_sock );
297                                 max_rt--;
298                         }
299                 }
300         }
301
302         return msg;                                                                     // last message caries the status of last/only send attempt
303 }
304
305 /*
306         Return to sender allows a message to be sent back to the endpoint where it originated.
307         The source information in the message is used to select the socket on which to write
308         the message rather than using the message type and round-robin selection. This
309         should return a message buffer with the state of the send operation set. On success
310         (state is RMR_OK, the caller may use the buffer for another receive operation), and on
311         error it can be passed back to this function to retry the send if desired. On error,
312         errno will liklely have the failure reason set by the nanomsg send processing.
313         The following are possible values for the state in the message buffer:
314
315         Message states returned:
316                 RMR_ERR_BADARG - argument (context or msg) was nil or invalid
317                 RMR_ERR_NOHDR  - message did not have a header
318                 RMR_ERR_NOENDPT- an endpoint to send the message to could not be determined
319                 RMR_ERR_SENDFAILED - send failed; errno has nano error code
320                 RMR_ERR_RETRY   - operation failed, but caller should retry
321
322         A nil message as the return value is rare, and generally indicates some kind of horrible
323         failure. The value of errno might give a clue as to what is wrong.
324
325         CAUTION:
326                 Like send_msg(), this is non-blocking and will return the msg if there is an errror.
327                 The caller must check for this and handle.
328 */
329 extern rmr_mbuf_t*  rmr_rts_msg( void* vctx, rmr_mbuf_t* msg ) {
330         int nn_sock;                            // endpoint socket for send
331         uta_ctx_t*      ctx;
332         int state;
333         uta_mhdr_t*     hdr;
334         char*   hold_src;                       // we need the original source if send fails
335
336         if( (ctx = (uta_ctx_t *) vctx) == NULL || msg == NULL ) {               // bad stuff, bail fast
337                 errno = EINVAL;                                                                                         // if msg is null, this is their clue
338                 if( msg != NULL ) {
339                         msg->state = RMR_ERR_BADARG;
340                 }
341                 return msg;
342         }
343
344         errno = 0;                                                                                                              // at this point any bad state is in msg returned
345         if( msg->header == NULL ) {
346                 fprintf( stderr, "rmr_send_msg: ERROR: message had no header\n" );
347                 msg->state = RMR_ERR_NOHDR;
348                 return msg;
349         }
350
351         nn_sock = uta_epsock_byname( ctx->rtable, (char *) ((uta_mhdr_t *)msg->header)->src );                  // socket of specific endpoint
352         if( nn_sock < 0 ) {
353                 msg->state = RMR_ERR_NOENDPT;
354                 return msg;                                                     // preallocated msg can be reused since not given back to nn
355         }
356
357         hold_src = strdup( (char *) ((uta_mhdr_t *)msg->header)->src );                                                 // the dest where we're returning the message to
358         strncpy( (char *) ((uta_mhdr_t *)msg->header)->src, ctx->my_name, RMR_MAX_SID );                // must overlay the source to be ours
359         msg = send_msg( ctx, msg, nn_sock );
360         if( msg ) {
361                 strncpy( (char *) ((uta_mhdr_t *)msg->header)->src, hold_src, RMR_MAX_SID );            // always return original source so rts can be called again
362                 msg->flags |= MFL_ADDSRC;                                                                                                       // if msg given to send() it must add source
363         }
364
365         free( hold_src );
366         return msg;
367 }
368
369 /*
370         Call sends the message based on message routing using the message type, and waits for a
371         response message to arrive with the same transaction id that was in the outgoing message.
372         If, while wiating for the expected response,  messages are received which do not have the
373         desired transaction ID, they are queued. Calls to uta_rcv_msg() will dequeue them in the
374         order that they were received.
375
376         Normally, a message struct pointer is returned and msg->state must be checked for RMR_OK
377         to ensure that no error was encountered. If the state is UTA_BADARG, then the message
378         may be resent (likely the context pointer was nil).  If the message is sent, but no
379         response is received, a nil message is returned with errno set to indicate the likley
380         issue:
381                 ETIMEDOUT -- too many messages were queued before reciving the expected response
382                 ENOBUFS -- the queued message ring is full, messages were dropped
383                 EINVAL  -- A parameter was not valid
384                 EAGAIN  -- the underlying message system wsa interrupted or the device was busy;
385                                         user should call this function with the message again.
386
387
388         QUESTION:  should user specify the number of messages to allow to queue?
389 */
390 extern rmr_mbuf_t* rmr_call( void* vctx, rmr_mbuf_t* msg ) {
391         uta_ctx_t*              ctx;
392         unsigned char   expected_id[RMR_MAX_XID+1];             // the transaction id in the message; we wait for response with same ID
393
394         if( (ctx = (uta_ctx_t *) vctx) == NULL || msg == NULL ) {               // bad stuff, bail fast
395                 if( msg != NULL ) {
396                         msg->state = RMR_ERR_BADARG;
397                 }
398                 return msg;
399         }
400
401         memcpy( expected_id, msg->xaction, RMR_MAX_XID );
402         expected_id[RMR_MAX_XID] = 0;                                   // ensure it's a string
403         if( DEBUG > 1 ) fprintf( stderr, "[DBUG] rmr_call is making call, waiting for (%s)\n", expected_id );
404         errno = 0;
405         msg->flags |= MFL_NOALLOC;                                              // we don't need a new buffer from send
406
407         msg = rmr_send_msg( ctx, msg );
408         if( msg ) {                                                                             // msg should be nil, if not there was a problem; return buffer to user
409                 if( msg->state != RMR_ERR_RETRY ) {
410                         msg->state = RMR_ERR_CALLFAILED;                // don't stomp if send_msg set retry
411                 }
412                 return msg;
413         }
414
415         return rmr_rcv_specific( ctx, NULL, (char *) expected_id, 20 );                 // wait for msg allowing 20 to queue ahead
416 }
417
418 /*
419         The outward facing receive function. When invoked it will pop the oldest message
420         from the receive ring, if any are queued, and return it. If the ring is empty
421         then the receive function is invoked to wait for the next message to arrive (blocking).
422
423         If old_msg is provided, it will be populated (avoiding lots of free/alloc cycles). If
424         nil, a new one will be allocated. However, the caller should NOT expect to get the same
425         struct back (if a queued message is returned the message struct will be different).
426 */
427 extern rmr_mbuf_t* rmr_rcv_msg( void* vctx, rmr_mbuf_t* old_msg ) {
428         uta_ctx_t*      ctx;
429         rmr_mbuf_t*     qm;                             // message that was queued on the ring
430
431         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
432                 if( old_msg != NULL ) {
433                         old_msg->state = RMR_ERR_BADARG;
434                 }
435                 errno = EINVAL;
436                 return old_msg;
437         }
438         errno = 0;
439
440         qm = (rmr_mbuf_t *) uta_ring_extract( ctx->mring );                     // pop if queued
441         if( qm != NULL ) {
442                 if( old_msg ) {
443                         rmr_free_msg( old_msg );                                                        // future:  push onto a free list???
444                 }
445
446                 return qm;
447         }
448
449         return rcv_msg( ctx, old_msg );                                                         // nothing queued, wait for one
450 }
451
452 /*
453         Receive with a timeout.  This is a convenience function when sitting on top of
454         nanomsg as it just sets the rcv timeout and calls rmr_rcv_msg().
455 */
456 extern rmr_mbuf_t* rmr_torcv_msg( void* vctx, rmr_mbuf_t* old_msg, int ms_to ) {
457         uta_ctx_t*      ctx;
458
459         if( (ctx = (uta_ctx_t *) vctx) != NULL ) {
460                 if( ctx->last_rto != ms_to ) {                                                  // avoid call overhead
461                         rmr_set_rtimeout( vctx, ms_to );
462                 }
463         }
464
465         return rmr_rcv_msg( vctx, old_msg );
466 }
467
468
469 /*
470         This blocks until the message with the 'expect' ID is received. Messages which are received
471         before the expected message are queued onto the message ring.  The function will return
472         a nil message and set errno to ETIMEDOUT if allow2queue messages are received before the
473         expected message is received. If the queued message ring fills a nil pointer is returned
474         and errno is set to ENOBUFS.
475
476         Generally this will be invoked only by the call() function as it waits for a response, but
477         it is exposed to the user application as three is no reason not to.
478 */
479 extern rmr_mbuf_t* rmr_rcv_specific( void* vctx, rmr_mbuf_t* msg, char* expect, int allow2queue ) {
480         uta_ctx_t*      ctx;
481         int     queued = 0;                             // number we pushed into the ring
482         int     exp_len = 0;                    // length of expected ID
483
484         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
485                 if( msg != NULL ) {
486                         msg->state = RMR_ERR_BADARG;
487                 }
488                 errno = EINVAL;
489                 return msg;
490         }
491
492         errno = 0;
493
494         if( expect == NULL || ! *expect ) {                             // nothing expected if nil or empty string, just receive
495                 return rmr_rcv_msg( ctx, msg );
496         }
497
498         exp_len = strlen( expect );
499         if( exp_len > RMR_MAX_XID ) {
500                 exp_len = RMR_MAX_XID;
501         }
502         if( DEBUG ) fprintf( stderr, "[DBUG] rcv_specific waiting for id=%s\n",  expect );
503
504         while( queued < allow2queue ) {
505                 msg = rcv_msg( ctx, msg );                                      // hard wait for next
506                 if( msg->state == RMR_OK ) {
507                         if( memcmp( msg->xaction, expect, exp_len ) == 0 ) {                    // got it -- return it
508                                 if( DEBUG ) fprintf( stderr, "[DBUG] rcv-specific matched (%s); %d messages were queued\n", msg->xaction, queued );
509                                 return msg;
510                         }
511
512                         if( ! uta_ring_insert( ctx->mring, msg ) ) {                                    // just queue, error if ring is full
513                                 if( DEBUG > 1 ) fprintf( stderr, "[DBUG] rcv_specific ring is full\n" );
514                                 errno = ENOBUFS;
515                                 return NULL;
516                         }
517
518                         if( DEBUG ) fprintf( stderr, "[DBUG] rcv_specific queued message type=%d\n", msg->mtype );
519                         queued++;
520                         msg = NULL;
521                 }
522         }
523
524         if( DEBUG ) fprintf( stderr, "[DBUG] rcv_specific timeout waiting for %s\n", expect );
525         errno = ETIMEDOUT;
526         return NULL;
527 }
528
529
530 /*
531         Initialise the message routing environment. Flags are one of the UTAFL_
532         constants. Proto_port is a protocol:port string (e.g. tcp:1234). If default protocol
533         (tcp) to be used, then :port is all that is needed.
534
535         At the moment it seems that TCP really is the only viable protocol, but
536         we'll allow flexibility.
537
538         The return value is a void pointer which must be passed to most uta functions. On
539         error, a nil pointer is returned and errno should be set.
540 */
541 static void* init( char* uproto_port, int max_msg_size, int flags ) {
542         uta_ctx_t*      ctx = NULL;
543         char    bind_info[NN_SOCKADDR_MAX];     // bind info
544         char*   proto = "tcp";                          // pointer into the proto/port string user supplied
545         char*   port;
546         char*   proto_port;
547         char    wbuf[1024];                                     // work buffer
548         char*   tok;                                            // pointer at token in a buffer
549         int             state;
550         char*   interface = NULL;                       // interface to bind to pulled from RMR_BIND_IF if set
551
552         fprintf( stderr, "[INFO] ric message routing library on nanomsg (%s %s.%s.%s built: %s)\n",
553                         QUOTE_DEF(GIT_ID), QUOTE_DEF(MAJOR_VER), QUOTE_DEF(MINOR_VER), QUOTE_DEF(PATCH_VER), __DATE__ );
554
555         errno = 0;
556         if( uproto_port == NULL ) {
557                 proto_port = strdup( "tcp:4567" );
558         } else {
559                 proto_port = strdup( uproto_port );             // so we can modify it
560         }
561
562         if( (ctx = (uta_ctx_t *) malloc( sizeof( uta_ctx_t ) )) == NULL ) {
563                 errno = ENOMEM;
564                 return NULL;
565         }
566         memset( ctx, 0, sizeof( uta_ctx_t ) );
567
568
569         ctx->mring = uta_mk_ring( 128 );                                // message ring to hold asynch msgs received while waiting for call response
570         ctx->last_rto = -2;                                                             // last receive timeout that was set; invalid value to force first to set
571
572         ctx->max_plen = RMR_MAX_RCV_BYTES + sizeof( uta_mhdr_t );               // default max buffer size
573         if( max_msg_size > 0 ) {
574                 if( max_msg_size <= ctx->max_plen ) {                                           // user defined len can be smaller
575                         ctx->max_plen = max_msg_size;
576                 } else {
577                         fprintf( stderr, "[WARN] rmr_init: attempt to set max payload len > than allowed maximum; capped at %d bytes\n", ctx->max_plen );
578                 }
579         }
580
581         ctx->max_mlen = ctx->max_plen + sizeof( uta_mhdr_t );
582
583         uta_lookup_rtg( ctx );                                                  // attempt to fill in rtg info; rtc will handle missing values/errors
584
585         ctx->nn_sock = nn_socket( AF_SP, NN_PULL );             // our 'listen' socket should allow multiple senders to connect
586         if( ctx->nn_sock < 0 ) {
587                 fprintf( stderr, "[CRIT] rmr_init: unable to initialise nanomsg listen socket: %d\n", errno );
588                 free_ctx( ctx );
589                 return NULL;
590         }
591
592         if( (port = strchr( proto_port, ':' )) != NULL ) {
593                 if( port == proto_port ) {              // ":1234" supplied; leave proto to default and point port correctly
594                         port++;
595                 } else {
596                         *(port++) = 0;                  // term proto string and point at port string
597                         proto = proto_port;             // user supplied proto so point at it rather than default
598                 }
599         } else {
600                 port = proto_port;                      // assume something like "1234" was passed
601         }
602
603         if( (gethostname( wbuf, sizeof( wbuf ) )) < 0 ) {
604                 fprintf( stderr, "[CRIT] rmr_init: cannot determine localhost name: %s\n", strerror( errno ) );
605                 return NULL;
606         }
607         if( (tok = strchr( wbuf, '.' )) != NULL ) {
608                 *tok = 0;                                                                       // we don't keep domain portion
609         }
610         ctx->my_name = (char *) malloc( sizeof( char ) * RMR_MAX_SID );
611         if( snprintf( ctx->my_name, RMR_MAX_SID, "%s:%s", wbuf, port ) >= RMR_MAX_SID ) {                       // our registered name is host:port
612                 fprintf( stderr, "[CRIT] rmr_init: hostname + port must be less than %d characters; %s:%s is not\n", RMR_MAX_SID, wbuf, port );
613                 return NULL;
614         }
615
616         if( (interface = getenv( ENV_BIND_IF )) == NULL ) {
617                 interface = "0.0.0.0";
618         }
619         snprintf( bind_info, sizeof( bind_info ), "%s://%s:%s", proto, interface, port );
620         if( nn_bind( ctx->nn_sock, bind_info ) < 0) {                   // bind and automatically accept client sessions
621                 fprintf( stderr, "[CRIT] rmr_init: unable to bind nanomsg listen socket for %s: %s\n", bind_info, strerror( errno ) );
622                 nn_close( ctx->nn_sock );
623                 free_ctx( ctx );
624                 return NULL;
625         }
626
627         if( ! (flags & FL_NOTHREAD) ) {                 // skip if internal context that does not need rout table thread
628                 if( pthread_create( &ctx->rtc_th,  NULL, rtc, (void *) ctx ) ) {                // kick the rt collector thread
629                         fprintf( stderr, "[WARN] rmr_init: unable to start route table collector thread: %s", strerror( errno ) );
630                 }
631         }
632
633         free( proto_port );
634         return (void *) ctx;
635 }
636
637 /*
638         This sets the default trace length which will be added to any message buffers
639         allocated.  It can be set at any time, and if rmr_set_trace() is given a
640         trace len that is different than the default allcoated in a message, the message
641         will be resized.
642
643         Returns 0 on failure and 1 on success. If failure, then errno will be set.
644 */
645 extern int rmr_init_trace( void* vctx, int tr_len ) {
646         uta_ctx_t* ctx;
647
648         errno = 0;
649         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
650                 errno = EINVAL;
651                 return 0;
652         }
653
654         ctx->trace_data_len = tr_len;
655         return 1;
656 }
657
658 /*
659         Publicly facing initialisation function. Wrapper for the init() funcion above
660         as it needs to ensure internal flags are masked off before calling the
661         real workhorse.
662 */
663 extern void* rmr_init( char* uproto_port, int max_msg_size, int flags ) {
664         return init( uproto_port, max_msg_size, flags & UFL_MASK  );
665 }
666
667 /*
668         Return true if routing table is initialised etc. and app can send/receive.
669 */
670 extern int rmr_ready( void* vctx ) {
671         uta_ctx_t *ctx;
672
673         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
674                 return FALSE;
675         }
676
677         if( ctx->rtable != NULL ) {
678                 return TRUE;
679         }
680
681         return FALSE;
682 }
683
684 /*
685         Provides a non-fatal (compile) interface for the nng only function.
686         Not supported on top of nano, so this always returns -1.
687 */
688 extern int rmr_get_rcvfd( void* vctx ) {
689         errno = ENOTSUP;
690         return -1;
691 }
692
693 /*
694         Compatability (mostly) with NNG.
695 */
696 extern void rmr_close( void* vctx ) {
697         uta_ctx_t *ctx;
698
699         if( (ctx = (uta_ctx_t *) vctx) == NULL ) {
700                 return;
701         }
702
703         nn_close( ctx->nn_sock );
704 }