lexer

Documentation

Index

• func IsBinary(b byte) bool
• func IsDecimal(b byte) bool
• func IsHex(b byte) bool
• func IsIdentifierRune(s string) bool
• func IsOctal(b byte) bool
• type Lex
  • func NewLex(f *jnio.File) *Lex
  • func (l *Lex) Lex() []Token
  • func (l *Lex) Newln()
  • func (l *Lex) Token() Token
• type Token

Functions

func IsBinary

func IsBinary(b byte) bool

func IsDecimal

func IsDecimal(b byte) bool

func IsHex

func IsHex(b byte) bool

func IsIdentifierRune

func IsIdentifierRune(s string) bool

func IsOctal

func IsOctal(b byte) bool

Types

type Lex

type Lex struct {
	File   *jnio.File
	Pos    int
	Column int
	Row    int
	Logs   []jnlog.CompilerLog
	// contains filtered or unexported fields
}

func NewLex

func NewLex(f *jnio.File) *Lex

func (*Lex) Lex

func (l *Lex) Lex() []Token

func (*Lex) Newln

func (l *Lex) Newln()

func (*Lex) Token

func (l *Lex) Token() Token

type Token

type Token struct {
	File   *jnio.File
	Row    int
	Column int
	Kind   string
	Id     uint8
}