对'yylex()'的每个调用是否为输入生成一个令牌或所有令牌?

我试图了解软篷下的弹性工作原理。

• 在下面的第一个示例中,似乎 main() 电话 yylex() 只有一次 yLeX() 为整个输入生成所有标记。

• 在第二个例子中,似乎 主体() 电话 yLeX() 每个生成的令牌一次,以及 yLeX() 每次调用生成一个令牌。

每个电话都打给 yLeX() 为输入生成一个令牌还是所有令牌?

为什么是 yLeX() 在这两个例子中调用了不同的次数?

我听说 yLeX() 就像协程,对它的每个调用都将恢复上一次调用留下的其余输入,并生成一个令牌。从这个意义上讲,第一个示例如何调用 yLeX() 只需一次,并生成输入中的所有令牌?

谢谢。

/* just like Unix wc */
%{
int chars = 0;
int words = 0;
int lines = 0;
%}
%%
[a-zA-Z]+  { words++; chars += strlen(yytext); }
\n         { chars++; lines++; }
.          { chars++; }
%%
main(int argc, char **argv)
{
  yylex();
  printf("%8d%8d%8d\n", lines, words, chars);
}


$ ./a.out
The boy stood on the burning deck
shelling peanuts by the peck
^D
2 12 63
$

和

/* recognize tokens for the calculator and print them out */
%{
   enum yytokentype {
     NUMBER = 258,
     ADD = 259,
     SUB = 260,
     MUL = 261,
     DIV = 262,
     ABS = 263,
     EOL = 264
   };
   int yylval;
%}
%%
"+"    { return ADD; }
"-"    { return SUB; }
"*"    { return MUL; }
"/"    { return DIV; }
"|"    { return ABS; }
[0-9]+ { yylval = atoi(yytext); return NUMBER; }
\n     { return EOL; }
[ \t]  { /* ignore whitespace */ }
.      { printf("Mystery character %c\n", *yytext); }
%%
main(int argc, char **argv)
{
  int tok;
  while(tok = yylex()) {
    printf("%d", tok);
    if(tok == NUMBER) printf(" = %d\n", yylval);
    else printf("\n");
  }
}

$ ./a.out
a / 34 + |45
Mystery character a
262
258 = 34
259
263
258 = 45
264
^D
$