ひらめき共有

ひらめき共有

ETLでのデータプレビュー時に ソート・フィルタができるようにして欲しい

Member
編集済: May 2023 ひらめき共有

ETL構築後にJoinのキーカラムにnullや意図と異なるレコードを発見して、ETLに戻って修正……というケースがよくあります。スクリプトで加工したデータについても意図と異なる出力にしてしまっている、などの人為エラーに気づきにくく、結局データセットに出力しないと問題に気づけないですし、データフローのどの段階で間違っているのかが把握しづらいです。
現状では、フローの各段階でデータセット出力してチェックする…という操作で対応してますが、煩雑です。

ETL内のデータプレビューでこういったレコードが存在しているか、を確認・探索する手段がほしいので、データプレビューでソート・フィルタ などができるようになって欲しいです。

タグ付けされた:
7
7の投票

Active · 前回の更新

こんにちは!

It looks like you're new here. Members get access to exclusive content, events, rewards, and more. Sign in or register to get started.
ログイン

こんにちは!

It looks like you're new here. Members get access to exclusive content, events, rewards, and more. Sign in or register to get started.
ログイン