plugin

Documentation

Index

• type Spider
  • func (s *Spider) Close() error
  • func (s *Spider) Init(service interfaces.Service) error
  • func (s *Spider) Process(data interface{}) (interface{}, error)
• type SpiderDescriptor
• type SpiderSource

Types

type Spider

type Spider struct {
	interfaces.Service
}

func (*Spider) Close

func (s *Spider) Close() error

func (*Spider) Init

func (s *Spider) Init(service interfaces.Service) error

func (*Spider) Process

func (s *Spider) Process(data interface{}) (interface{}, error)

type SpiderDescriptor

type SpiderDescriptor struct {
	ID          string `json:"id"`
	Url         string `json:"url"`
	Title       string `json:"title"`
	Description string `json:"description"`
	Keywords    string `json:"keywords"`
	Content     string `json:"content"`
	Image       string `json:"image"`
	Timestamp   int64  `json:"timestamp"`
}

type SpiderSource

type SpiderSource struct {
	Url string `json:"url"`
}