CSV Stream
CSV-Stream-Verarbeitung parst Zeile für Zeile, ohne die gesamte Datei zu puffern, und unterstützt große Dateien und Pipelines.
Zweck
CSV zeilenweise in Szenarien mit begrenztem Speicher oder großen Dateien parsen; unterstützt Pipeline-Transformationen und Streaming-Ausgabe.
Mechanismus
Ein Streaming-Parser hält einen Zeilenpuffer, erkennt den Zeilenabschluss, parst eine Zeile und emittiert ein Record-Objekt, ohne auf die ganze Datei zu warten. Er kann in Transform- und Write-Streams gepiped werden.
Anwendungsfälle
- Verarbeitung großer CSV-Dateien
- ETL-Pipelines
- Datenbank-Bulk-Import