Method isIdentifier

src/Lexer.cpp:1047–1062

/////////////////////////////////////////////////////////////////////////// Lexer::Type::identifier [ ]

// Lexer::Type::identifier
//   <isIdentifierStart> [ <isIdentifierNext> ]*
bool Lexer::isIdentifier(std::string& token, Lexer::Type& type) {
  std::size_t marker = _cursor;

  if (isIdentifierStart(_text[marker])) {
    utf8_next_char(_text, marker);

    while (isIdentifierNext(_text[marker])) utf8_next_char(_text, marker);

    token = _text.substr(_cursor, marker - _cursor);
    type = Lexer::Type::identifier;
    _cursor = marker;
    return true;
  }

  return false;
}

////////////////////////////////////////////////////////////////////////////////
// Lexer::Type::word