Britzel
Was ist Chunking? Einfach erklärt
Das Zerteilen langer Dokumente in kleinere, sinnvolle Abschnitte, bevor sie in die Wissensbasis wandern. Nur so findet die Suche später die passende Passage statt eines ganzen Dokuments.
Die Alltagsanalogie
Wie ein dickes Handbuch in Karteikarten zerlegen — eine Karte pro Thema. Wer fragt, bekommt die eine passende Karte, nicht das ganze Buch.
Im Job heißt das
Liefert der Wissensbot ganze Handbücher statt der passenden halben Seite, ist meist das Chunking schlecht eingestellt.
Eselsbrücke
Chunking ZERTEILT in Karteikarten, Komprimierung QUETSCHT nur klein — Häppchen statt Schraubstock.
Auf Englisch
chunking, text splitting, document chunking
The process of splitting long documents into smaller, meaningful sections before adding them to a knowledge base. Only then can a search later return the relevant passage instead of an entire document.