Allow null move in analysis and edit-game mode
[xboard.git] / parser.c
1 // New PGN parser by by HGM. I was dissatisfied with the old flex-generated parser for several reasons:
2 // 1) It required flex to build
3 // 2) It was not possible to use variant-dependent syntax, which gave trouble for '+' as Sogi promoChar vs check symbol
4 // 3) It could not handle double-digit rank numbers
5 // 4) It could not handle PSN moves, with (alpha rank and file digit)
6 // 5) Having more than 12 ranks would require extension of the rules anyway
7 // 6) It was cumbersome to maintain, which much code duplication that had to be kept in sync when changing something
8 // 7) It needed special handling for packaging, because we wanted to include parser.c for people who had no flex
9 // 8) It was quite large because of the table-driven flex algorithm.
10 // This new parser suffers from none of that. It might even accomodate traditional Xiangqi notation at some future time.
11
12 #include "config.h"
13 #include <stdio.h>
14 #include <ctype.h>
15 #include <string.h>
16 #include "common.h"
17 #include "backend.h"
18 #include "frontend.h"
19 #include "parser.h"
20 #include "moves.h"
21
22
23 extern Board    boards[MAX_MOVES];
24 extern int      PosFlags(int nr);
25 int             yyboardindex;
26 int             yyskipmoves = FALSE;
27 char            currentMoveString[4096]; // a bit ridiculous size?
28 char *yy_text;
29
30 #define PARSEBUFSIZE 10000
31
32 static FILE *inputFile;
33 static char *inPtr, *parsePtr, *parseStart;
34 static char inputBuf[PARSEBUFSIZE];
35 static char yytext[PARSEBUFSIZE];
36 static char fromString = 0, lastChar = '\n';
37
38 #define NOTHING 0
39 #define NUMERIC 1
40 #define ALPHABETIC 2
41 #define BADNUMBER (-2000000000)
42
43 int ReadLine()
44 {   // Read one line from the input file, and append to the buffer
45     char c, *start = inPtr;
46     if(fromString) return 0; // parsing string, so the end is a hard end
47     if(!inputFile) return 0;
48     while((c = fgetc(inputFile)) != EOF) {
49         *inPtr++ = c;
50         if(c == '\n') { *inPtr = NULLCHAR; return 1; }
51         if(inPtr - inputBuf > PARSEBUFSIZE-2) inPtr--; //prevent crash on overflow
52     }
53     if(inPtr == start) return 0;
54     *inPtr++ = '\n', *inPtr = NULLCHAR; // repair missing linefeed at EOF
55     return 1;
56 }
57
58 int Scan(char c, char **p)
59 {   // line-spanning skip to mentioned character or EOF
60     do {
61         while(**p) if(*(*p)++ == c) return 0;
62     } while(ReadLine());
63     // no closing bracket; force match for entire rest of file.
64     return 1;
65 }
66
67 int SkipWhite(char **p)
68 {   // skip spaces tabs and newlines; return 1 if anything was skipped
69     char *start = *p;
70     do{
71         while(**p == ' ' || **p == '\t' || **p == '\n' || **p == '\r') (*p)++;
72     } while(**p == NULLCHAR && ReadLine()); // continue as long as ReadLine reads something
73     return *p != start;
74 }
75
76 int Match(char *pattern, char **ptr)
77 {
78     char *p = pattern, *s = *ptr;
79     while(*p && (*p == *s++ || s[-1] == '\r' && *p--)) p++;
80     if(*p == 0) {
81         *ptr = s;
82         return 1;
83     }
84     return 0; // no match, no ptr update
85 }
86
87 int Word(char *pattern, char **p)
88 {
89     if(Match(pattern, p)) return 1;
90     if(*pattern >= 'a' && *pattern <= 'z' && *pattern - **p == 'a' - 'A') { // capitalized
91         (*p)++;
92         if(Match(pattern + 1, p)) return 1;
93         (*p)--;
94     }
95     return 0;
96 }
97
98 int Verb(char *pattern, char **p)
99 {
100     int res = Word(pattern, p);
101     if(res && !Match("s", p)) Match("ed", p); // eat conjugation suffix, if any
102     return res;
103 }
104
105
106 int Number(char **p)
107 {
108     int val = 0;
109     if(**p < '0' || **p > '9') return BADNUMBER;
110     while(**p >= '0' && **p <= '9') {
111         val = 10*val + *(*p)++ - '0';
112     }
113     return val;
114 }
115
116 int RdTime(char c, char **p)
117 {
118     char *start = ++(*p), *sec; // increment *p, as it was pointing to the opening ( or {
119     if(Number(p) == BADNUMBER) return 0;
120     sec = *p;
121     if(Match(":", p) && Number(p) != BADNUMBER && *p - sec == 3) { // well formed
122         sec = *p;
123         if(Match(".", p) && Number(p) != BADNUMBER && *(*p)++ == c) return 1; // well-formed fraction
124         *p = sec;
125         if(*(*p)++ == c) return 1; // matching bracket without fraction
126     }
127     *p = start; // failure
128     return 0;
129 }
130
131 char PromoSuffix(char **p)
132 {
133     char *start = *p;
134     if(**p == 'e' && (Match("ep", p) || Match("e.p.", p))) { *p = start; return NULLCHAR; } // non-compliant e.p. suffix is no promoChar!
135     if(**p == '+' && gameInfo.variant == VariantShogi) { (*p)++; return '+'; } 
136     if(**p == '=') (*p)++; //optional =
137     if(**p == '(' && (*p)[2] == ')' && isalpha( (*p)[1] )) { (*p) += 3; return (*p)[-2]; }
138     if(isalpha(**p)) return *(*p)++;
139     if(*p != start) return '='; // must be the optional =
140     return NULLCHAR; // no suffix detected
141 }
142
143 int NextUnit(char **p)
144 {       // Main parser routine
145         int coord[4], n, result, piece, i;
146         char type[4], promoted, separator, slash, *oldp, *commentEnd, c;
147         int wom = WhiteOnMove(yyboardindex);
148
149         // ********* try white first, because it is so common **************************
150         if(**p == ' ' || **p == '\n' || **p == '\t') { parseStart = (*p)++; return Nothing; }
151
152
153         if(**p == NULLCHAR) { // make sure there is something to parse
154             if(fromString) return 0; // we are parsing string, so the end is really the end
155             *p = inPtr = inputBuf;
156             if(!ReadLine()) return 0; // EOF
157         }
158         parseStart = oldp = *p; // remember where we begin
159
160         // Next we do some common symbols where the first character commits us to things that cannot possibly be a move
161         // (but not {} comments, as those force time-consuming matching of PGN results immediately after it)
162
163         // ********* PGN tags ******************************************
164         if(**p == '[') {
165             oldp = ++(*p);
166             if(Match("--", p)) { // "[--" could be start of position diagram
167                 if(!Scan(']', p) && (*p)[-3] == '-' && (*p)[-2] == '-') return PositionDiagram; 
168                 *p = oldp;
169             }
170             SkipWhite(p);
171             if(isdigit(**p) || isalpha(**p)) {
172                 do (*p)++; while(isdigit(**p) || isalpha(**p) || **p == '+' ||
173                                 **p == '-' || **p == '=' || **p == '_' || **p == '#');
174                 SkipWhite(p);
175                 if(*(*p)++ == '"') {
176                     while(**p != '\n' && (*(*p)++ != '"'|| (*p)[-2] == '\\')); // look for unescaped quote
177                     if((*p)[-1] !='"') { *p = oldp; Scan(']', p); return Comment; } // string closing delimiter missing
178                     SkipWhite(p); if(*(*p)++ == ']') return PGNTag;
179                 }
180             }
181             Scan(']', p); return Comment;
182         }
183
184
185         // ********* variations (nesting) ******************************
186         if(**p =='(') {
187             if(RdTime(')', p)) return ElapsedTime;
188             return Open;
189         }
190         if(**p ==')') { (*p)++; return Close; }
191         if(**p == ';') { while(**p != '\n') (*p)++; return Comment; }
192
193
194         // ********* attempt to recognize a SAN move in the leading non-blank text *****
195         piece = separator = promoted = slash = n = 0;
196         for(i=0; i<4; i++) coord[i] = -1, type[i] = NOTHING;
197         if(**p == '+') (*p)++, promoted++;
198         if(**p >= 'a' && **p <= 'z' && (*p)[1]== '@') piece =*(*p)++ + 'A' - 'a'; else
199         if(**p >= 'A' && **p <= 'Z') {
200              piece = *(*p)++; // Note we could test for 2-byte non-ascii names here
201              if(**p == '/') slash = *(*p)++;
202         }
203         while(n < 4) {
204             if(**p >= 'a' && **p < 'x') coord[n] = *(*p)++ - 'a', type[n++] = ALPHABETIC;
205             else if((i = Number(p)) != BADNUMBER) coord[n] = i, type[n++] = NUMERIC;
206             else break;
207             if(n == 2 && type[0] == type[1]) { // if two identical types, the opposite type in between must have been missing
208                 type[2] = type[1]; coord[2] = coord[1];
209                 type[1] = NOTHING; coord[1] = -1; n++;
210             }
211         }
212         // we always get here, and might have read a +, a piece, and upto 4 potential coordinates
213         if(n <= 2) { // could be from-square or disambiguator, when -:xX follow, or drop with @ directly after piece, but also to-square
214              if(**p == '-' || **p == ':' || **p == 'x' || **p == 'X' || // these cannot be move suffix, so to-square must follow
215                  (**p == '@' || **p == '*') && n == 0 && !promoted && piece) { // P@ must also be followed by to-square
216                 separator = *(*p)++;
217                 if(n == 1) coord[1] = coord[0]; // must be disambiguator, but we do not know which yet
218                 n = 2;
219                 while(n < 4) { // attempt to read to-square
220                     if(**p >= 'a' && **p < 'x') coord[n] = *(*p)++ - 'a', type[n++] = ALPHABETIC;
221                     else if((i = Number(p)) != BADNUMBER) coord[n] = i, type[n++] = NUMERIC;
222                     else break;
223                 }
224             } else if((**p == '+' || **p == '=') && n == 1 && piece && type[0] == NUMERIC) { // can be traditional Xiangqi notation
225                 separator = *(*p)++;
226                 n = 2;
227                 if((i = Number(p)) != BADNUMBER) coord[n] = i, type[n++] = NUMERIC;
228             } else if(n == 2) { // only one square mentioned, must be to-square
229                 while(n < 4) { coord[n] = coord[n-2], type[n] = type[n-2], coord[n-2] = -1, type[n-2] = NOTHING; n++; }
230             }
231         } else if(n == 3 && type[1] != NOTHING) { // must be hyphenless disambiguator + to-square
232             for(i=3; i>0; i--) coord[i] = coord[i-1], type[i] = type[i-1]; // move to-square to where it belongs
233             type[1] = NOTHING; // disambiguator goes in first two positions
234             n = 4;
235         }
236 if(appData.debugMode)fprintf(debugFP, "trial %d,%d,%d,%d  type %d%d%d%d\n", coord[0], coord[1], coord[2], coord[3], type[0], type[1], type[2], type[3]);
237         // we always get here; move must be completely read now, with to-square coord(s) at end
238         if(n == 3) { // incomplete to-square. Could be Xiangqi traditional, or stuff like fxg
239             if(piece && type[1] == NOTHING && type[0] == NUMERIC && type[2] == NUMERIC && 
240                 (separator == '+' || separator == '=' || separator == '-')) {
241                      // Xiangqi traditional
242
243                 return ImpossibleMove; // for now treat as invalid
244             }
245             // fxg stuff, but also things like 0-0, 0-1 and 1-0
246             if(!piece && type[1] == NOTHING && type[0] == ALPHABETIC && type[2] == ALPHABETIC
247                  && (coord[0] != 14 || coord[2] != 14) /* reserve oo for castling! */ ) {
248                 piece = 'P'; n = 4; // kludge alert: fake full to-square
249             }
250         }
251         if(n == 4 && type[2] != type[3] && // we have a valid to-square (kludge: type[3] can be NOTHING on fxg type move)
252                      (piece || !promoted) && // promoted indicator only valid on named piece type
253                      (type[2] == ALPHABETIC || gameInfo.variant == VariantShogi)) { // in Shogi also allow alphabetic rank
254             DisambiguateClosure cl;
255             int fromX, fromY, toX, toY;
256
257             if(slash && (!piece || type[1] == NOTHING)) goto badMove; // slash after piece only in ICS long format
258             if (yyskipmoves) return (int) AmbiguousMove; /* not disambiguated */
259
260             if(type[2] == NUMERIC) { // alpha-rank
261                 coord[2] = BOARD_RGHT - BOARD_LEFT - coord[2];
262                 coord[3] = BOARD_HEIGHT - coord[3];
263                 if(coord[0] >= 0) coord[0] = BOARD_RGHT - BOARD_LEFT - coord[0];
264                 if(coord[1] >= 0) coord[1] = BOARD_HEIGHT - coord[1];
265             }
266             toX = cl.ftIn = (currentMoveString[2] = coord[2] + 'a') - AAA;
267             toY = cl.rtIn = (currentMoveString[3] = coord[3] + '0') - ONE;
268             if(type[3] == NOTHING) cl.rtIn = -1; // for fxg type moves ask for toY disambiguation
269             else if(toY >= BOARD_HEIGHT || toY < 0)   return ImpossibleMove; // vert off-board to-square
270             if(toX < BOARD_LEFT || toX >= BOARD_RGHT) return ImpossibleMove;
271             if(piece) {
272                 cl.pieceIn = CharToPiece(wom ? piece : ToLower(piece));
273                 if(cl.pieceIn == EmptySquare) return ImpossibleMove; // non-existent piece
274                 if(promoted) cl.pieceIn = (ChessSquare) (PROMOTED cl.pieceIn);
275             } else cl.pieceIn = EmptySquare;
276             if(separator == '@' || separator == '*') { // drop move. We only get here without from-square or promoted piece
277                 fromY = DROP_RANK; fromX = cl.pieceIn;
278                 currentMoveString[0] = piece;
279                 currentMoveString[1] = '@';
280                 return LegalityTest(boards[yyboardindex], PosFlags(yyboardindex)&~F_MANDATORY_CAPTURE, fromY, fromX, toY, toX, NULLCHAR);
281             }
282             if(type[1] == NOTHING && type[0] != NOTHING) { // there is a disambiguator
283                 if(type[0] != type[2]) coord[0] = -1, type[1] = type[0], type[0] = NOTHING; // it was a rank-disambiguator
284             }
285             if(  type[1] != type[2] && // means fromY is of opposite type as ToX, or NOTHING
286                 (type[0] == NOTHING || type[0] == type[2]) ) { // well formed
287
288                 fromX = (currentMoveString[0] = coord[0] + 'a') - AAA;
289                 fromY = (currentMoveString[1] = coord[1] + '0') - ONE;
290                 currentMoveString[4] = cl.promoCharIn = PromoSuffix(p);
291                 currentMoveString[5] = NULLCHAR;
292                 if(type[0] != NOTHING && type[1] != NOTHING && type[3] != NOTHING) { // fully specified.
293                     // Note that Disambiguate does not work for illegal moves, but flags them as impossible
294                     if(piece) { // check if correct piece indicated
295                         ChessSquare realPiece = boards[yyboardindex][fromY][fromX];
296                         if(PieceToChar(realPiece) == '~') realPiece = (ChessSquare) (DEMOTED realPiece);
297                         if(!(appData.icsActive && PieceToChar(realPiece) == '+') && // trust ICS if it moves promoted pieces
298                            piece && realPiece != cl.pieceIn) return ImpossibleMove;
299                     }
300                     result = LegalityTest(boards[yyboardindex], PosFlags(yyboardindex), fromY, fromX, toY, toX, cl.promoCharIn);
301                     if (currentMoveString[4] == NULLCHAR) { // suppy missing mandatory promotion character
302                       if(result == WhitePromotion  || result == BlackPromotion) {
303                         switch(gameInfo.variant) {
304                           case VariantCourier:
305                           case VariantShatranj: currentMoveString[4] = PieceToChar(BlackFerz); break;
306                           case VariantGreat:    currentMoveString[4] = PieceToChar(BlackMan); break;
307                           case VariantShogi:    currentMoveString[4] = '+'; break;
308                           default:              currentMoveString[4] = PieceToChar(BlackQueen);
309                         }
310                       } else if(result == WhiteNonPromotion  || result == BlackNonPromotion) {
311                                                 currentMoveString[4] = '=';
312                       }
313                     } else if(appData.testLegality && gameInfo.variant != VariantSChess && // strip off unnecessary and false promo characters
314                        !(result == WhitePromotion  || result == BlackPromotion ||
315                          result == WhiteNonPromotion || result == BlackNonPromotion)) currentMoveString[4] = NULLCHAR;
316                     return result;
317                 } else if(cl.pieceIn == EmptySquare) cl.pieceIn = wom ? WhitePawn : BlackPawn;
318                 cl.ffIn = type[0] == NOTHING ? -1 : coord[0] + 'a' - AAA;
319                 cl.rfIn = type[1] == NOTHING ? -1 : coord[1] + '0' - ONE;
320
321                 Disambiguate(boards[yyboardindex], PosFlags(yyboardindex), &cl);
322
323                 if(cl.kind == ImpossibleMove && !piece && type[1] == NOTHING // fxg5 type
324                         && toY == (wom ? 4 : 3)) { // could be improperly written e.p.
325                     cl.rtIn += wom ? 1 : -1; // shift target square to e.p. square
326                     Disambiguate(boards[yyboardindex], PosFlags(yyboardindex), &cl);
327                     if((cl.kind != WhiteCapturesEnPassant && cl.kind != BlackCapturesEnPassant))
328                         return ImpossibleMove; // nice try, but no cigar
329                 }
330
331                 currentMoveString[0] = cl.ff + AAA;
332                 currentMoveString[1] = cl.rf + ONE;
333                 currentMoveString[3] = cl.rt + ONE;
334                 currentMoveString[4] = cl.promoChar;
335
336                 if((cl.kind == WhiteCapturesEnPassant || cl.kind == BlackCapturesEnPassant) && (Match("ep", p) || Match("e.p.", p)));
337
338                 return (int) cl.kind;
339             }
340         }
341 badMove:// we failed to find algebraic move
342
343
344         // ********* SAN Castings *************************************
345         *p = oldp;
346         if(**p == 'O' || **p == 'o' || **p == '0') {
347             int castlingType = 0;
348             if(Match("O-O-O", p) || Match("o-o-o", p) || Match("0-0-0", p) || 
349                Match("OOO", p) || Match("ooo", p) || Match("000", p)) castlingType = 2;
350             else if(Match("O-O", p) || Match("o-o", p) || Match("0-0", p) ||
351                     Match("OO", p) || Match("oo", p) || Match("00", p)) castlingType = 1;
352             if(castlingType) { //code from old parser, collapsed for both castling types, and streamlined a bit
353                 int rf, ff, rt, ft; ChessSquare king;
354
355                 if (yyskipmoves) return (int) AmbiguousMove; /* not disambiguated */
356
357                 if (wom) {
358                     rf = 0;
359                     rt = 0;
360                     king = WhiteKing;
361                 } else {
362                     rf = BOARD_HEIGHT-1;
363                     rt = BOARD_HEIGHT-1;
364                     king = BlackKing;
365                 }
366                 ff = (BOARD_WIDTH-1)>>1; // this would be d-file
367                 if (boards[yyboardindex][rf][ff] == king) {
368                     /* ICS wild castling */
369                     ft = castlingType == 1 ? BOARD_LEFT+1 : BOARD_RGHT-3;
370                 } else {
371                     ff = BOARD_WIDTH>>1; // e-file
372                     ft = castlingType == 1 ? BOARD_RGHT-2 : BOARD_LEFT+2;
373                 }
374                 if(PosFlags(0) & F_FRC_TYPE_CASTLING) {
375                     if (wom) {
376                         ff = initialRights[2];
377                         ft = initialRights[castlingType-1];
378                     } else {
379                         ff = initialRights[5];
380                         ft = initialRights[castlingType+2];
381                     }
382                     if (appData.debugMode) fprintf(debugFP, "Parser FRC (type=%d) %d %d\n", castlingType, ff, ft);
383                     if(ff == NoRights || ft == NoRights) return ImpossibleMove;
384                 }
385                 sprintf(currentMoveString, "%c%c%c%c",ff+AAA,rf+ONE,ft+AAA,rt+ONE);
386                 if (appData.debugMode) fprintf(debugFP, "(%d-type) castling %d %d\n", castlingType, ff, ft);
387
388                 return (int) LegalityTest(boards[yyboardindex],
389                               PosFlags(yyboardindex)&~F_MANDATORY_CAPTURE, // [HGM] losers: e.p.!
390                               rf, ff, rt, ft, NULLCHAR);
391             }
392         }
393
394
395         // ********* Comments and result messages **********************
396         *p = oldp; commentEnd = NULL; result = 0;
397         if(**p == '{') {
398             if(RdTime('}', p)) return ElapsedTime;
399             if(lastChar == '\n' && Match("--------------\n", p)) {
400                 char *q;
401                 i = Scan ('}', p); q = *p - 16;
402                 if(Match("\n--------------}\n", &q)) return PositionDiagram;
403             } else i = Scan('}', p);
404             commentEnd = *p; if(i) return Comment; // return comment that runs to EOF immediately
405         }
406         if(commentEnd) SkipWhite(p);
407         if(Match("*", p)) result = GameUnfinished;
408         else if(**p == '0') {
409             if( Match("0-1", p) || Match("0/1", p) || Match("0:1", p) ||
410                 Match("0 - 1", p) || Match("0 / 1", p) || Match("0 : 1", p)) result = BlackWins;
411         } else if(**p == '1') {
412             if( Match("1-0", p) || Match("1/0", p) || Match("1:0", p) ||
413                 Match("1 - 0", p) || Match("1 / 0", p) || Match("1 : 0", p)) result = WhiteWins;
414             else if(Match("1/2 - 1/2", p) || Match("1/2:1/2", p) || Match("1/2 : 1/2", p) || Match("1 / 2 - 1 / 2", p) ||
415                     Match("1 / 2 : 1 / 2", p) || Match("1/2", p) || Match("1 / 2", p)) result = GameIsDrawn;
416         }
417         if(result) {
418             if(Match(" (", p) && !Scan(')', p) || Match(" {", p) && !Scan('}', p)) { // there is a comment after the PGN result!
419                 if(commentEnd) { *p = commentEnd; return Comment; } // so comment before it is normal comment; return that first
420             }
421             return result; // this returns a possible preceeding comment as result details
422         }
423         if(commentEnd) { *p = commentEnd; return Comment; } // there was no PGN result following, so return as normal comment
424
425
426         // ********* Move numbers (after castlings or PGN results!) ***********
427         if((i = Number(p)) != BADNUMBER) { // a single number was read as part of our attempt to read a move
428             char *numEnd = *p;
429             if(**p == '.') (*p)++; SkipWhite(p);
430             if(**p == '+' || isalpha(**p) || gameInfo.variant == VariantShogi && *p != numEnd && isdigit(**p)) {
431                 *p = numEnd;
432                 return i == 1 ? MoveNumberOne : Nothing;
433             }
434             *p = numEnd; return Nothing;
435         }
436
437
438         // ********* non-compliant game-result indicators *********************
439         if(Match("+-+", p) || Word("stalemate", p)) return GameIsDrawn;
440         if(Match("++", p) || Verb("resign", p) || (Word("check", p) || 1) && Word("mate", p) )
441             return (wom ? BlackWins : WhiteWins);
442         c = ToUpper(**p);
443         if(Word("w", p) && (Match("hite", p) || 1) || Word("b", p) && (Match("lack", p) || 1) ) {
444             if(**p != ' ') return Nothing;
445             ++*p;
446             if(Verb("disconnect", p)) return GameUnfinished;
447             if(Verb("resign", p) || Verb("forfeit", p) || Word("mated", p) || Word("lost", p) || Word("loses", p))
448                 return (c == 'W' ? BlackWins : WhiteWins);
449             if(Word("mates", p) || Word("wins", p) || Word("won", p))
450                 return (c != 'W' ? BlackWins : WhiteWins);
451             return Nothing;
452         }
453         if(Word("draw", p)) {
454             if(**p == 'n') (*p)++;
455             if(**p != ' ') return GameIsDrawn;
456             oldp = ++*p;
457             if(Word("agreed", p)) return GameIsDrawn;
458             if(Match("by ", p) && (Word("repetition", p) || Word("agreement", p)) ) return GameIsDrawn;
459             *p = oldp;
460             if(*(*p)++ == '(') {
461                 while(**p != '\n') if(*(*p)++ == ')') break;
462                 if((*p)[-1] == ')')  return GameIsDrawn;
463             }
464             *p = oldp - 1; return GameIsDrawn;
465         }
466
467
468         // ********* Numeric annotation glyph **********************************
469         if(**p == '$') { (*p)++; if(Number(p) != BADNUMBER) return NAG; return Nothing; }
470
471
472         // ********** by now we are getting down to the silly stuff ************
473         if(Word("gnu", p) || Match("GNU", p)) {
474             if(**p == ' ') (*p)++;
475             if(Word("chess", p) || Match("CHESS", p)) {
476                 char *q;
477                 if((q = strstr(*p, "game")) || (q = strstr(*p, "GAME")) || (q = strstr(*p, "Game"))) {
478                     (*p) = q + 4; return GNUChessGame;
479                 }
480             }
481             return Nothing;
482         }
483         if(lastChar == '\n' && (Match("# ", p) || Match("; ", p) || Match("% ", p))) {
484             while(**p != '\n' && **p != ' ') (*p)++;
485             if(**p == ' ' && (Match(" game file", p) || Match(" position file", p))) {
486                 while(**p != '\n') (*p)++; // skip to EOLN
487                 return XBoardGame;
488             }
489             *p = oldp; // we might need to re-match the skipped stuff
490         }
491
492         if(Match("@@@@", p) || Match("--", p) || Match("Z0", p) || Match("pass", p) || Match("null", p)) {
493             strncpy(currentMoveString, "@@@@", 5);
494             return yyboardindex & F_WHITE_ON_MOVE ? WhiteDrop : BlackDrop;
495         }
496
497         // ********* Efficient skipping of (mostly) alphabetic chatter **********
498         while(isdigit(**p) || isalpha(**p) || **p == '-') (*p)++;
499         if(*p != oldp) {
500             if(**p == '\'') {
501                 while(isdigit(**p) || isalpha(**p) || **p == '-' || **p == '\'') (*p)++;
502                 return Nothing; // random word
503             }
504             if(lastChar == '\n' && Match(": ", p)) { // mail header, skip indented lines
505                 do {
506                     while(**p != '\n') (*p)++;
507                     if(!ReadLine()) return Nothing; // append next line if not EOF
508                 } while(Match("\n ", p) || Match("\n\t", p));
509             }
510             return Nothing;
511         }
512
513
514         // ********* Could not match to anything. Return offending character ****
515         (*p)++;
516         return Nothing;
517 }
518
519 /*
520     Return offset of next pattern in the current file.
521 */
522 int yyoffset()
523 {
524     return ftell(inputFile) - (inPtr - parsePtr); // subtract what is read but not yet parsed
525 }
526
527 void yynewfile (FILE *f)
528 {   // prepare parse buffer for reading file
529     inputFile = f;
530     inPtr = parsePtr = inputBuf;
531     fromString = 0;
532     lastChar = '\n';
533     *inPtr = NULLCHAR; // make sure we will start by reading a line
534 }
535
536 void yynewstr P((char *s))
537 {
538     parsePtr = s;
539     inputFile = NULL;
540     fromString = 1;
541 }
542
543 int yylex()
544 {   // this replaces the flex-generated parser
545     int result = NextUnit(&parsePtr);
546     char *p = parseStart, *q = yytext;
547     while(p < parsePtr) *q++ = *p++; // copy the matched text to yytext[]
548     *q = NULLCHAR;
549     lastChar = q[-1];
550     return result;
551 }
552
553 int Myylex()
554 {   // [HGM] wrapper for yylex, which treats nesting of parentheses
555     int symbol, nestingLevel = 0, i=0;
556     char *p;
557     static char buf[256*MSG_SIZ];
558     buf[0] = NULLCHAR;
559     do { // eat away anything not at level 0
560         symbol = yylex();
561         if(symbol == Open) nestingLevel++;
562         if(nestingLevel) { // save all parsed text between (and including) the ()
563             for(p=yytext; *p && i<256*MSG_SIZ-2;) buf[i++] = *p++;
564             buf[i] = NULLCHAR;
565         }
566         if(symbol == 0) break; // ran into EOF
567         if(symbol == Close) symbol = Comment, nestingLevel--;
568     } while(nestingLevel || symbol == Nothing);
569     yy_text = buf[0] ? buf : (char*)yytext;
570     return symbol;
571 }
572
573 ChessMove yylexstr(int boardIndex, char *s, char *buf, int buflen)
574 {
575     ChessMove ret;
576     char *savPP = parsePtr;
577     fromString = 1;
578     yyboardindex = boardIndex;
579     parsePtr = s;
580     ret = (ChessMove) Myylex();
581     strncpy(buf, yy_text, buflen-1);
582     buf[buflen-1] = NULLCHAR;
583     parsePtr = savPP;
584     fromString = 0;
585     return ret;
586 }
587