feat: S3 오브젝트 벌크 삭제 시 1000건 단위로 삭제되도록 변경

[kth990303]

개요

• 매일 오전 4시 경, 사용하지 않는 이미지를 삭제할 때마다 아래 에러가 발생합니다.

ERROR [org.springframework.aop.interceptor.SimpleAsyncUncaughtExceptionHandler.handleUncaughtException:39] - Unexpected exception occurred invoking async method: public void mocacong.server.support.AwsS3Uploader.deleteImages(mocacong.server.service.event.DeleteNotUsedImagesEvent)
com.amazonaws.services.s3.model.AmazonS3Exception: The XML you provided was not well-formed or did not validate against our published schema (Service: Amazon S3; Status Code: 400; Proxy: null)

이로 인해, 불필요한 에러 로그가 매일 쌓이고 있습니다.
(고객 입장에선 문제없지만, 로그 분석하는 데에 불필요한 에러로그가 쌓이는 상황)

작업사항

• 1,000건 단위로 이미지를 삭제하도록 작업했습니다.
  • 리스트 파티셔닝을 위해 Guava 라이브러리를 추가했으며, 버전 선택은 https://mvnrepository.com/artifact/com.google.guava/guava 를 참고했습니다.
• 로컬에서 S3가 미연동돼있으므로, 그리고 매일 오전 4시에 배치로 작동되는 코드이므로, 관련 테스트코드는 생략합니다.
• 로컬에서 더이상 에러가 나지 않는 걸 확인했습니다.

주의사항

관련문서

• https://awscli.amazonaws.com/v2/documentation/api/latest/reference/s3api/delete-objects.html

[sonarqubecloud]

Quality Gate passed

Kudos, no new issues were introduced!

0 New issues
0 Security Hotspots
No data about Coverage
No data about Duplication

See analysis details on SonarCloud

[Ji-soo708]

해당 에러에 대해 찾아보니 S3가 삭제 요청 날릴 때 최대 1000개의 이미지 키에 대해서만 삭제가 가능해서 생기는 문제로 보이네요. 잘 해결해주셔서 바로 approve합니다! 수고하셨어요. 👍

[jung-woo-kim]

작업사항 보고 삭제할 이미지 파일이 1000개가 넘을 때 이 에러가 발생할 것으로 예상이 됐었는데요. 지금 삭제할 이미지가 1000개가 넘는 경우가 있었을까? 싶은데, 우선 작업 맥락과 결과는 이해가 되어서 approve 남깁니다! 👍