Chunking

« Back to Glossary Index

Das Aufteilen langer Dokumente in kleinere, thematisch zusammenhängende Abschnitte, bevor sie in eine Vektordatenbank eingespeist werden. Ermöglicht es einem RAG-System, gezielt die passenden Textstücke zu finden, statt ganze Dokumente durchsuchen zu müssen. Nötig wird das, weil ein Embedding für ein ganzes Dokument zu ungenau würde und lange Texte oft nicht ins Kontextfenster passen. Typischer Einsatzfall: eigene PDFs, Handbücher oder Wissensdatenbanken, die per RAG durchsuchbar gemacht werden sollen.

« Back to Glossary Index