User Dokumentation
DataSets
Best Practices
4min
Möglichkeiten von DataSets:
- Importierte Rohdaten für die weitere Verarbeitung vorbereiten
- Datenqualität verbessern
- Unvollständige oder kaputte Datensätze ausfiltern
- Daten aus unterschiedlichen Quellen in einem Datensatz zusammenzuführen
- Datenfeeds vorbereiten
- Dynamische DataSets im Workflow generieren und bereitstellen
Eine Stage bildet immer das Ergebnis einer Query an einem bestimmten Punkt der DataPipeline ab. Jede Stage hat eine eigene Funktionalität, wie z. B. das Filtern der Daten. Die Stages sind dabei hierarchisch aufgebaut, das heißt wenn Stage 3 von 5 getestet wird, werden nur die Stages 1 bis 3 ausgeführt. Aktuell sind drei Stages in yedi verfügbar: Filter, Join und Transformer.
Ja, das geht. Dazu können die Stages ganz einfach über das Plus Symbol hinzugefügt werden.
Ja, das geht. Die gewünschten Stages können einfach per Drag & Drop verschoben werden.
- Filter Stage hinzufügen
- Gewünschtes Feld auswählen
- Operator != wählen
- Als Wert "null" eingeben
In der Vorschau sind nun alle Datensätze zu sehen, bei denen das gewünschte Feld ungleich null, also gefüllt ist