Featuredata-mart··#606

migrate update_data_mart DAG to FatTask V3

🎉 migrate update_data_mart DAG to FatTask V3

데이터 마트 업데이트 처리 방식을 개선하여 시스템 안정성과 처리 속도를 크게 향상시켰습니다. 기존에는 데이터 집계 과정에서 많은 수의 작업이 동시에 실행되어 시스템에 부하가 발생할 수 있었으나, 이번 개선을 통해 작업 단위를 대폭 줄여 스케줄러 부하를 약 94% 감소시켰습니다.

주요 개선 사항

병렬 처리 구조를 최적화하여 기존 성능은 그대로 유지하면서도 시스템 리소스를 훨씬 효율적으로 사용합니다. 또한 처리 중 예기치 않은 중단이 발생하더라도 처음부터 다시 시작하지 않고 중단된 지점부터 이어서 처리할 수 있어, 대용량 데이터를 다루시는 고객님께서 더욱 안정적으로 서비스를 이용하실 수 있습니다.

관련 변경사항

  • Hub Issue: #606