Skip to content

DEV Community

Synthetic Manufacturing Data Platform: Evidence First Series' Articles

Back to 박준현's Series

박준현

Jul 10

gold 숫자가 이상할 때 source_hash, quality, lineage로 원인 좁히기

#dataengineering #python #etl #learning

2 min read

박준현

Jul 12

source_hash로 같은 입력 재처리를 안전하게 skip하기

#dataengineering #python #etl #learning

1 min read

박준현

Jul 12

schema drift를 fail이 아니라 warn으로 둔 이유

#dataengineering #python #etl #learning

2 min read

박준현

Jul 12

wide CSV 여러 개를 EAV로 모아 gold mart 만들기

#dataengineering #python #etl #learning

2 min read

박준현

Jul 12

skip에서 partition overwrite로: business_date 재처리를 Iceberg로 다시 표현하기

#dataengineering #python #etl #learning

3 min read

박준현

Jul 18

Kafka event를 바로 Spark로 보내지 않고 batch bridge를 둔 이유

#dataengineering #kafka #python #apacheiceberg

3 min read

박준현

Jul 19

Python batch를 Spark로 옮겼더니 802.675가 달라졌다

#dataengineering #spark #apacheiceberg #airflow

3 min read