https://thedduro.github.io/tags/pyspark/Recent content in PySpark on ThedduroHugoko-krMon, 21 Sep 2026 14:22:11 +0900https://thedduro.github.io/posts/spark-cache-when-to-use/Mon, 21 Sep 2026 14:22:11 +0900https://thedduro.github.io/posts/spark-cache-when-to-use/<p>API 요청 로그에서 잘못된 데이터를 걸러냈다. 이제 유효한 요청이 몇 건인지 세고, 경로별 평균 응답 시간도 구하려고 한다. 전처리한 DataFrame 하나를 두 작업에서 사용하면 되니, 전처리도 한 번만 실행될 것처럼 보인다.</p>