chunker

type BasicRuneChunker ¶

type BasicRuneChunker struct {
	// contains filtered or unexported fields
}

BasicRuneChunker реализует базовый чанкинг по рунам с overlap и лимитом MaxChunks.

Важно: реализация статлесс и не читает env vars. Контракты валидации options находятся в публичном wrapper'е (pkg/draftrag). Здесь предполагается, что параметры уже валидированы.

func NewBasicRuneChunker(chunkSize, overlap, maxChunks int) *BasicRuneChunker

func (c *BasicRuneChunker) Chunk(ctx context.Context, doc domain.Document) ([]domain.Chunk, error)

type ContextualChunker ¶ added in v1.0.0

type ContextualChunker struct {
	// contains filtered or unexported fields
}

@sk-task contextual-chunking#T1.1: ContextualChunker decorator (AC-001–AC-006)

func NewContextualChunker(base domain.Chunker, contextKey, template string) *ContextualChunker

func (c *ContextualChunker) Chunk(ctx context.Context, doc domain.Document) ([]domain.Chunk, error)

type SemanticChunker ¶ added in v1.0.0

type SemanticChunker struct {
	// contains filtered or unexported fields
}

@sk-task chunker-semantic#T2.1: semantic chunker algorithm (AC-001–AC-006, AC-008)

func NewSemanticChunker(opts SemanticChunkerOptions) *SemanticChunker

func (c *SemanticChunker) Chunk(ctx context.Context, doc domain.Document) ([]domain.Chunk, error)

type SemanticChunkerOptions ¶ added in v1.0.0

type SemanticChunkerOptions struct {
	Embedder            domain.Embedder
	SimilarityThreshold float64
	MinChunkSize        int
	MaxChunkSize        int
}

SemanticChunkerOptions — параметры семантического чанкера (post-validation).