#PySpark

Spark cache(), 어디에 붙여야 효과가 있을까?

같은 DataFrame을 다시 사용해도 계산이 반복되는 이유부터, cache()를 붙일 위치와 비용까지 PySpark 예제로 이해해 본다.

• #Data Engineering
• #Spark
• #PySpark