token

Documentation

Index

• type Token
• type TokenType
  • func GetIdentifierType(k string) TokenType
  • func (t TokenType) String() string

Types

type Token

type Token struct {
	Type    TokenType
	Literal string
	Col     int
	Line    int
}

type TokenType

type TokenType byte

const (
	ERROR TokenType = iota
	EOF

	// Identifiers
	IDENTIFIER // variable names: x, y, add, foobar

	// literals
	NUMBER
	STRING

	// Operators
	ASSIGN       // =
	ASSIGN_ARROW // <-
	PIPE         // |>
	PLUS         // +
	MINUS        // -
	DIV          // /
	MOD          // %
	BANG         // !
	MUL          // *
	GT           // >
	LT           // <
	GTE          // >=
	LTE          // <=
	EQ           // ==
	NOT_EQ       // !=
	OR           // ||
	VOR          // |
	AND          // &&
	VAND         // &

	// Delimiters
	COMMA     // ,
	COLON     // :
	SEMICOLON // ;
	LPAREN    // (
	RPAREN    // )
	LBRACKET  // [
	RBRACKET  // ]
	LBRACE    // {
	RBRACE    // }
	NEWLINE   // \n

	// Keywords
	FUNCTION // fn
	LET      // let
	IF       // if
	ELSE     // else
	TRUE     // true
	FALSE    // false
	NULL     // null
	RETURN   // return
	FOR      // for
	IN       // IN
)

func GetIdentifierType

func GetIdentifierType(k string) TokenType

func (TokenType) String

func (t TokenType) String() string

for debugging purposes