[Cloudflare] R2: vs S3 벤치마크

이전 포스트
https://blog.naver.com/sssang97/223077815906
R2는 저렴한 AWS S3의 대안 중 하나다.

저장 비용 자체도 S3보다 1.6배 정도는 저렴한데, CDN을 탄 조회 비용까지 무료이니 빅테크 서비스 중에서는 이만한게 없다.

문제: CDN 레이턴시?

비용 저렴하고 다 좋긴 좋은데, Cloudflare에는 큰 문제가 있다. 한국에서만.

엔터프라이즈 솔루션을 사용하지 않으면 한국 국내의 CDN 서버를 사용하지 않는다는 것이다.
그래서 이미지 같은걸 cloudflare 솔루션으로 조회한다고 쳐도, 한국에 위치한 CDN 서버를 타는게 아니라, 근처에 도쿄나 홍콩, 싱가폴 같은 다른 나라의 CDN 서버에서 가져오게 된다.

엔터프라이즈를 쓸만큼의 우량고객이라면 괜찮겠으나, 일반적인 사용량의 사용자라면 지리적인 격차로 인한 레이턴시 증가는 꽤 심각하게 와닿는 문제일 수 있다.
애초에 엔터프라이즈 긁으면 한달에 수백만원에서 천만원 단위는 우습게 나간다.

레이턴시 실험 준비

성능차가 얼마나 나는지 직접 한번 실험을 해보기로 했다.

작은 이미지, 적당한 이미지, 17mb까리 좀 큰 이미지를 테스트셋으로 준비했다.
내 경우에는 100mb~gb 같은 거대한 파일을 다룰 일은 없어서 그정도까지 찔러보진 않았다.

각각에 적당히 업로드했다.

그리고 복잡하게 코드 짤거 없이 쉘 커맨드로 대충 찔렀다.

time wget --server-response --report-speed=bits -O output_image.jpg 경로

작은 이미지 (281k)

AWS Cloudfront부터 찔렀다.

X-Cache: Miss from cloudfront라는 헤더가 보일텐데, 캐시에서 이미지를 가져오지 못했다는 뜻이다. 처음 조회하는거니까 당연하다.
최초에는 S3->CDN으로 적재하는 시간이 걸리다보니, 거의 1초에 가깝게 걸리기도 했다.

다시 찌르면

X-Cache: Hit from cloudfront가 뜬 것이 보인다.
이번에는 캐시에서 잘 가져왔고, 실제로 실행시간도 100ms 단위로 빠르게 나왔다.
반복적으로 시도해도 100ms 내외로 잘 가져오는 것을 확인할 수 있었다.

그러면 Cloudflare는 어떨까?

최초에 찌를 때는 당연히 느리다. 비슷하게 0.8초쯤 걸렸다.
CF-Cache-Status: Miss라고 뜨는게 캐시 미스가 났다는 뜻이다.

그리고 여기서 주목할건 CF-RAY라는 응답 헤더다.

이건 각 요청에 대한 trace ID 같은건데, 저기 뒤에 붙은 ICN이 리전명이다.
그리고 ICN이 한국이다.
사실 다른 사람들 글 보니까 홍콩 리전에 붙고 그러던데, 나는 이것저것 반복적으로 찔러봐도 ICN에만 붙었다. 리전이 선정되는 기준을 잘 모르겠다.

아무튼 반복적으로 찔러보면, 캐시 HIT이 되니까 빨라지긴 한다.

근데 AWS에 비하면 그 레이턴시의 안정성이 확연히 떨어진 것을 볼 수 있었다.
빠를때는 100ms로 오기도 하는데, 300ms대로 오기도 했다.

중간 이미지 (6mb)

AWS Cloudfront로 먼저 찔렀다.
중간 크기 이미지의 경우에는 크기 자체가 좀 있어서인지, 캐시를 타든 안타든간에 500~900ms 정도는 걸렸다.

여기서는 cloudflare와 aws의 성능차가 그다지 눈에 띄지는 않았다.

거의 비슷하더라

큰 이미지 (17mb)

AWS의 경우

cloudflare의 경우

매우 작을때는 좀 차이가 나지만 애매한 크기로 가면 성능차가 두드러지지는 않는 것 같았다.
파일이 더 커지면 벌어질 수도 있을 것 같긴 한데, 시도해보지는 않았다.

보류

사실 국내 CDN 안타서 느리다고 하길래 얼마나 느린지, 그래도 쓸만은 한 정도인지 실험해보려 한건데, 너무 빠르고 국내 CDN도 잘 타는거 같아서 좀 당황했다.

국내 CDN을 안타는 조건이 따로 또 있는건지, 버그인건지 아직까지도 잘 모르겠다.
시간을 두고 한번 더 확인을 해봐야 할 것 같다. 실험은 잠시 중지다.

참조
https://developers.cloudflare.com/fundamentals/reference/http-headers/#cf-ray
https://marinesnow34.github.io/2023/09/23/s3r2/