Best Practices

was genau kann ich mit datasets machen? möglichkeiten von datasets möglichkeiten von datasets importierte rohdaten für die weitere verarbeitung vorbereiten importierte rohdaten für die weitere verarbeitung vorbereiten datenqualität verbessern datenqualität verbessern unvollständige oder kaputte datensätze unvollständige oder kaputte datensätze ausfiltern ausfiltern daten aus unterschiedlichen quellen in einem datensatz zusammenzuführen daten aus unterschiedlichen quellen in einem datensatz zusammenzuführen datenfeeds vorbereiten datenfeeds vorbereiten dynamische datasets im workflow generieren und bereitstellen dynamische datasets im workflow generieren und bereitstellen praktische tipps / best practice was ist eine stage? eine stage bildet immer das ergebnis einer query an einem bestimmten punkt der datapipeline ab jede stage hat eine eigene funktionalität, wie z b das filtern der daten die stages sind dabei hierarchisch aufgebaut, das heißt wenn stage 3 von 5 getestet wird, werden nur die stages 1 bis 3 ausgeführt aktuell sind drei stages in yedi verfügbar filter, join und transformer eine stage bildet immer das ergebnis einer query an einem bestimmten punkt der datapipeline ab jede stage hat eine eigene funktionalität, wie z b das filtern der daten die stages sind dabei hierarchisch aufgebaut, das heißt wenn stage 3 von 5 getestet wird, werden nur die stages 1 bis 3 ausgeführt aktuell sind drei stages in yedi verfügbar filter, join und transformer kann ich mehrere stages zu einem dataset hinzufügen? ja, das geht dazu können die stages ganz einfach über das plus symbol hinzugefügt werden ja, das geht dazu können die stages ganz einfach über das plus symbol hinzugefügt werden kann ich die reihenfolge der stages im nachhinein ändern? ja, das geht die gewünschten stages können einfach per drag & drop verschoben werden ja, das geht die gewünschten stages können einfach per drag & drop verschoben werden wie kann ich alle datensätze filtern, bei denen ein bestimmtes feld gefüllt ist? filter stage hinzufügen filter stage hinzufügen gewünschtes feld auswählen gewünschtes feld auswählen operator != wählen operator != wählen als wert "null" eingeben als wert "null" eingeben in der vorschau sind nun alle datensätze zu sehen, bei denen das gewünschte feld ungleich null, also gefüllt ist in der vorschau sind nun alle datensätze zu sehen, bei denen das gewünschte feld ungleich null, also gefüllt ist