Uses of Class
xyz.cofe.text.parser.Token

Packages that use Token

Package	Description
xyz.cofe.text.parser	Лексический анализатор
xyz.cofe.text.parser.lex	Текстовые лексемы и соответствующие парсеры
xyz.cofe.text.template	Работа с текстовыми шаблонами
xyz.cofe.text.template.ast	Классы AST дерева текстовых шаблонов
xyz.cofe.xml.stream.path	Классы для потоковой обработки больших XML файлов

Uses of Token in xyz.cofe.text.parser

Methods in xyz.cofe.text.parser that return Token

Modifier and Type	Method and Description
Token	Token.clone() Создает клон объекта
Token	TokenParser.parse(String source, int offset) Возвращает токен если ему соответ цепочка сиволов в указаной точке

Methods in xyz.cofe.text.parser that return types with arguments of type Token

Modifier and Type	Method and Description
static List<Token>	LexerUtil.filter(List<Token> toks, Class... whiteSpaceTokens) Фильтрует токены в списке.
List<Token>	ListLexer.parse(String source) Разпознает цепочку символов последовательно перебирая из списка разпознователей
List<Token>	Lexer.parse(String source, Reciver<String> errorReciver) Анализ входной цепочки символов
List<Token>	ListLexer.parse(String source, Reciver<String> errorReciver) Разпознает цепочку символов последовательно перебирая из списка разпознователей

Method parameters in xyz.cofe.text.parser with type arguments of type Token

Modifier and Type	Method and Description
static List<Token>	LexerUtil.filter(List<Token> toks, Class... whiteSpaceTokens) Фильтрует токены в списке.

Constructors in xyz.cofe.text.parser with parameters of type Token

Constructor and Description
Token(Token src) Конструктор копирования

Uses of Token in xyz.cofe.text.parser.lex

Subclasses of Token in xyz.cofe.text.parser.lex

Modifier and Type	Class and Description
class	AnyChar Лексема представляющая любой текстовый символ
class	Comment Лексема - коментарий
class	FieldAccess Лексема - доступ к полю: identifier { '.' identifier }
class	Identifier Лексема - идентификатор
class	Keyword Лексема - ключевое слово
class	NumberConst Лексема - число
class	TagName Лексема имени XML тэга
class	TextConst Текстовая константа "lalala \escape"
class	WhiteSpace Лексема - пробельный символ

Methods in xyz.cofe.text.parser.lex that return Token

Modifier and Type	Method and Description
Token	FieldAccess.getBeginToken()
Token	FieldAccess.getEndToken()
Token[]	FieldAccess.getIdTokens()
Token	IdentifierParser.parse(String source, int offset)
Token	SLCommentParser.parse(String source, int offset)
Token	OrParser.parse(String source, int offset)
Token	WhiteSpaceParser.parse(String source, int offset)
Token	AnyCharParser.parse(String source, int offset)

Constructors in xyz.cofe.text.parser.lex with parameters of type Token

Constructor and Description
AnyChar(Token src)
FieldAccess(String id, String source, Token beginToken, Token endToken, Token[] ids)
FieldAccess(String id, String source, Token beginToken, Token endToken, Token[] ids)

Uses of Token in xyz.cofe.text.template

Fields in xyz.cofe.text.template with type parameters of type Token

Modifier and Type	Field and Description
protected Func1<AstNode,Pointer<Token>>	TemplateParser.start_any
protected Func1<AstNode,Pointer<Token>>	TemplateParser.start_code
protected Func1<AstNode,Pointer<Token>>	TemplateParser.start_escape
protected Map<String,Func1<AstNode,Pointer<Token>>>	TemplateParser.start_patterns

Method parameters in xyz.cofe.text.template with type arguments of type Token

Modifier and Type	Method and Description
protected AstNode	TemplateParser.start(Pointer<Token> ptr)

Uses of Token in xyz.cofe.text.template.ast

Fields in xyz.cofe.text.template.ast declared as Token

Modifier and Type	Field and Description
Token	Code.begin
Token	Block.begin
Token	Code.end
Token	Block.end
Token	Text.token
Token	Escape.token

Constructors in xyz.cofe.text.template.ast with parameters of type Token

Constructor and Description
Block(Token begin, AstNode body, Token end)
Code(Token begin, BlockBody body, Token end)
Escape(Token token, LinkedHashMap<String,String> rewriteMap)
Text(Token token)

Uses of Token in xyz.cofe.xml.stream.path

Methods in xyz.cofe.xml.stream.path that return types with arguments of type Token

Modifier and Type	Method and Description
protected List<Token>	PathParser.lexParse(String text)

Method parameters in xyz.cofe.xml.stream.path with type arguments of type Token

Modifier and Type	Method and Description
protected PathExpression	PathParser.parsePath(Pointer<Token> ptr)
protected PathExpression	PathParser.tagPattern(Pointer<Token> ptr)