Added quantiling UDAFs
[com/gs-lite.git] / src / ftacmp / partn.l
1 /* ------------------------------------------------\r
2 Copyright 2014 AT&T Intellectual Property\r
3    Licensed under the Apache License, Version 2.0 (the "License");\r
4    you may not use this file except in compliance with the License.\r
5    You may obtain a copy of the License at\r
6 \r
7      http://www.apache.org/licenses/LICENSE-2.0\r
8 \r
9    Unless required by applicable law or agreed to in writing, software\r
10    distributed under the License is distributed on an "AS IS" BASIS,\r
11    WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.\r
12    See the License for the specific language governing permissions and\r
13    limitations under the License.\r
14  ------------------------------------------- */\r
15 \r
16 \r
17 /*\r
18         MUST COMPILE WITH\r
19                 flex -PPartnParser -opartnlexer.cc partn.l\r
20         (or equivalent).\r
21 */      \r
22 \r
23 %{\r
24 /*\r
25  * AT&T lex can't handle this lexer due to lex bugs.  It works with flex\r
26  * 2.3.7, pclex 2.0.5, and MKS lex 3.1a.\r
27  */\r
28 \r
29  #include "parse_partn.h"\r
30  #include <string.h>\r
31 \r
32 \r
33 \r
34 #include "partn.tab.cc.h"\r
35 \r
36 /*\r
37         Some includes that flex doesn't include as standard,\r
38         but which are needed.\r
39 */\r
40 \r
41 #include <stdlib.h>\r
42 #include <string.h>\r
43 \r
44 \r
45 //              Prevent flex from defining yywrap as extern "C" \r
46 \r
47 #define YY_SKIP_YYWRAP\r
48 \r
49 /*              No lex lib, supply the yywrap fcn. that normally resides there\r
50 */\r
51 \r
52 int PartnParserwrap(){return(1);}\r
53 \r
54 extern int PartnParserdebug;\r
55 \r
56 \r
57 /*\r
58                 These variables are used for error reporting:\r
59                 flex_partn_lineno : the line currently being parsed when the error occurs.\r
60                 flex_partn_ch : the character on the line where the error occurs\r
61                 flex_partn_linebuf : store the line for reporting.\r
62 \r
63                 NOTE : 1) the fixed size flex_partn_linebuf buffer is dangerous.\r
64                            2) You might get pointed to a place shortly after\r
65                                   where the syntax error occurs.  It is close enough\r
66                                   for now.\r
67 */\r
68 \r
69 int flex_partn_lineno = 1;\r
70 int flex_partn_ch = 0;\r
71 char flex_partn_linebuf[20000];\r
72 \r
73 char *flex_partn_stringinput = NULL;\r
74 int flex_partn_stringinput_ptr = 0;\r
75 FILE *flex_partn_fileinput = NULL;\r
76 int my_PartnParser_yyinput(char *buf, int max_size);\r
77 \r
78 \r
79 \r
80 void PartnParsererror(char *s){\r
81         int i;\r
82         fprintf(stderr,"On line %d, char %d: %s (token %s):\n%s\n",\r
83                                 flex_partn_lineno, flex_partn_ch, s, PartnParsertext, flex_partn_linebuf );\r
84     for(i=0;i<flex_partn_ch;i++){\r
85                 if(flex_partn_linebuf[i] == '\t'){\r
86                         fprintf(stderr,"\t");\r
87                 }else{\r
88                         fprintf(stderr," ");\r
89                 }\r
90         }\r
91         fprintf(stderr,"^\n");\r
92         //      fprintf(stderr,"%*s\n",1+flex_partn_ch,"^");\r
93 }\r
94 \r
95 #undef YY_INPUT\r
96 #define YY_INPUT(b, r, ms) (r = my_PartnParser_yyinput(b,ms))\r
97 \r
98 %}\r
99         /* MKS needs the next line to increase the NFA table */\r
100 %e 1200\r
101 %option noyywrap\r
102 \r
103 %%\r
104 \r
105         /* literal keyword tokens */\r
106 \r
107  /*\r
108                         The actions associated with each text token are to\r
109                         keep track of the current location (for syntax error reporting)\r
110                         and to report any necessary info to the emf.y parse tree builder\r
111 \r
112                         Its likely that there are a number of omissions, inconsistencies\r
113                         (some keywords do not need to be in caps), and relics\r
114                         (keywords such as BETWEEN, INDICATOR, etc., are not used\r
115                          in emf.y)\r
116                         This parser is somewhat of a work in progress.\r
117  */\r
118 \r
119  /*             Query keywords          */\r
120 \r
121 HEX     { flex_partn_ch+=PartnParserleng; return HEX_L;}\r
122 LHEX    { flex_partn_ch+=PartnParserleng; return LHEX_L;}\r
123 IP_VAL  { flex_partn_ch+=PartnParserleng; return IP_L;}\r
124 \r
125 \r
126 \r
127         /* punctuation */\r
128 \r
129 [;%&|!+*/:(),.\[\]$@#]  { flex_partn_ch+=PartnParserleng; return yytext[0]; }\r
130 "-"     { flex_partn_ch+=PartnParserleng; return yytext[0]; }\r
131 "~"     { flex_partn_ch+=PartnParserleng; return yytext[0]; }\r
132 \r
133         /* names */\r
134 \r
135 [A-Za-z_][A-Za-z0-9_]*  { flex_partn_ch+=PartnParserleng; PartnParserlval.strval = strdup(yytext); return NAME; }\r
136 \r
137         /* numbers */\r
138 \r
139 [0-9]+  |\r
140 [0-9]+UL        { flex_partn_ch+=PartnParserleng; PartnParserlval.strval = strdup(yytext);  return INTNUM; }\r
141 \r
142 [0-9]+ULL       { flex_partn_ch+=PartnParserleng; PartnParserlval.strval = strdup(yytext);  return LONGINTNUM; }\r
143 \r
144 \r
145         /* strings */\r
146 \r
147  /*                                                                                                                     */\r
148  /*             Newline : advance the error reporting line number       */\r
149  /*             and grab the next line into flex_partn_linebuf                  */\r
150  /*                                                                                                                     */\r
151 \r
152 \n.*            {flex_partn_ch=0; flex_partn_lineno++;\r
153                            strcpy(flex_partn_linebuf,PartnParsertext+1);\r
154                            yyless(1);\r
155                            }\r
156 \r
157 [ \t\r]+        {flex_partn_ch+=PartnParserleng; }      /* white space */\r
158 \r
159 "--".*$         {flex_partn_ch+=PartnParserleng; };     /* comment */\r
160 "//".*$         {flex_partn_ch+=PartnParserleng; };     /* comment */\r
161 \r
162 .|\n            {flex_partn_ch+=PartnParserleng; fprintf(stderr,"Warning: unknown token (ignored)\n");  PartnParsererror(yytext);}\r
163 \r
164 %%\r
165 \r
166 int my_PartnParser_yyinput(char *buf, int max_size){\r
167         int c = 0;\r
168         int inchar = 0;\r
169         \r
170         if(flex_partn_stringinput != NULL){\r
171                 while(c<max_size){\r
172                         if(flex_partn_stringinput[flex_partn_stringinput_ptr] != '\0'){\r
173                                 buf[c++] = flex_partn_stringinput[flex_partn_stringinput_ptr++];\r
174                         }else{\r
175                                 break;\r
176                         }\r
177                 }\r
178                 return(c);\r
179         }\r
180         \r
181         if(flex_partn_fileinput != NULL){\r
182                 while(c < max_size){\r
183                         inchar = getc(flex_partn_fileinput);\r
184                         if(inchar != EOF){\r
185                                 buf[c++] = inchar;\r
186                         }else{\r
187                                 break;\r
188                         }\r
189                 }\r
190                 return(c);\r
191         }\r
192         \r
193         return(0);\r
194 }\r
195 \r
196 void PartnParser_setfileinput(FILE *f){\r
197         PartnParserrestart(NULL);\r
198 \r
199         flex_partn_fileinput = f;\r
200         flex_partn_stringinput = NULL;\r
201         flex_partn_lineno = 1;\r
202         flex_partn_ch = 0;\r
203 }\r
204 \r
205 void PartnParser_setstringinput(char *s){\r
206         PartnParserrestart(NULL);\r
207 \r
208         flex_partn_fileinput = NULL;\r
209         flex_partn_stringinput = s;\r
210         flex_partn_stringinput_ptr = 0;\r
211         flex_partn_lineno = 1;\r
212         flex_partn_ch = 0;\r
213 }\r
214         \r
215                 \r
216 \r
217 \r