[AWS] Athena: 캐싱 전략

#AWS

Athena는 독특한 특유의 구조 탓에, 결과값을 캐시하고 재사용하는 것이 꽤 직관적이고 편리한 편이다.

아테나에서 쿼리를 날리면, 그 쿼리에 대한 결과값은 거의 반영구적으로 저장된다.
그냥 던지고 버리는 것이 아닌 셈이다.

그래서 설정된 버킷 경로에 가면, 그 결과에 대한 값이 파일 단위로 저장이 되어있다.

당연히 그냥 장식으로 두는 건 아니고, 캐싱용으로 사용할 수 있는 것이다.

쿼리 결과 재사용

Athena 편집기로 가보면, 귀퉁이에 캐싱을 위한 전용 옵션이 있다.
이게 저 캐시 데이터를 그대로 읽어오는 추가 기능이다.

그리고 동일한 쿼리로 날려보면, S3 버킷 스캔 없이 저장되어있는 값을 그대로 가져온다.

Athena 사용패턴의 대부분은 대형 데이터넷에 대한 느린 집계이기 때문에 캐시값을 사용하는 것이 성능적으로나 비용적으로 적합할 일이 많을 것이다.

참고로 이건 쿼리 형태가 조금만 달라져도 캐시 miss가 난다.
예를 들어, 기존 쿼리에서 limit 10 => limit 3으로 축소만 하더라도 즉시 캐시가 깨지고 스캔이 발생한다.

그렇게 유연한 기능은 아니다.

캐시 가능한 최대 기간은 7일이다.

그 이상은 안된다.

그리고 비결정적인 쿼리는 캐시를 사용하지 못한다. 대표적인 오염 요소가 RAND와 CURRENT_TIME이다. RAND와 CURRENT_TIME가 들어가는 쿼리는 Athena가 알아서 판단하고 캐시를 무조건 버린다.

그래서 이런 쿼리는 절대로 캐시를 타지 못한다.