fetch

type CacheEntry struct {
	URL       string `json:"url"`
	File      string `json:"file"`       // 缓存文件名（MD5.html）
	FetchedAt string `json:"fetched_at"` // 抓取时间
	Status    int    `json:"status"`     // HTTP状态码（预留）
}

type CacheManager struct {
	// contains filtered or unexported fields
}

type CacheMeta struct {
	Entries map[string]*CacheEntry `json:"entries"`
}

type CatalogConfig struct {
	Site      string         `json:"site"`
	URL       string         `json:"url"`
	Selectors Selectors      `json:"selectors"`
	Items     []*CatalogItem `json:"items"`
}

type CatalogItem struct {
	Title    string         `json:"title"`
	URL      string         `json:"url"`
	Children []*CatalogItem `json:"children,omitempty"`
}

type Config struct {
	Input     string // catalog.json路径
	Output    string // 输出目录
	Workers   int    // 并发数
	Retries   int    // 重试次数
	Timeout   int    // 超时时间
	AppConfig *models.AppConfig
}

type FetchResult struct {
	Title      string
	URL        string
	OutputPath string
	WordCount  int
	Success    bool
	Error      error
}

type Processor struct {
	// contains filtered or unexported fields
}

type Progress struct {
	Total     int32
	Completed int32
	Failed    int32
	Current   string
}

type Selectors struct {
	TOC         string `json:"toc"`
	Content     string `json:"content"`
	TOCType     string `json:"toc_type,omitempty"`     // 目录选择器类型: css/xpath
	ContentType string `json:"content_type,omitempty"` // 内容选择器类型: css/xpath
}