[product-analyzer] CloudFunctions 좌충우돌 적용기

[tonykang22]

CloudFunctions 좌충우돌 적용기

개요

• 문제 없이 CloudFunctions를 적용할 수 있다고 판단했으나 이슈 발생
• 이슈를 맞이하게 된 과정 및 해결 방안을 기록하기 위함

CloudFunctions 적용 이유

L7-check Action

• 기존에도 사용하던 action이다.
  • 매 5분 마다 hwas module의 L7 health check을 수행하여 문제가 있는 경우 slack 메시지 전송
• cron trigger 사용

Itemscout Action

• Itemscout의 API limit(800회 / 15분)으로 발생하는 병목을 해소하기 위한 action이다.
  • 검색 대상 키워드들로 대신 Itemscout 응답을 받아 전달
• basic trigger 사용
  • public endpoint가 존재해야 hwas module 내에서 요청을 보낼 수 있다.

어디가 문제인가...

외부 인터넷 접속

• 기존에 잘 trigger되던 L7-check action도 에러가 난다.
  • 외부 인터넷 호출 단계에서 timeout exception 발생
  • 외부 인터넷에 접속을 못하는 상황이었다.
• 파악한 CloudFunctions를 사용하기 위한 조건
  • 1. CloudFunctions는 KR-2 region의 subnet만 연결이 가능하다.
  • 2. private subnet만 연결이 가능하다.
  • 3. 외부 인터넷과 연결하기 위해서는 연결된 subnet의 NAT Gateway를 설정해야 한다.
• 3번 까지 수행 후, 마주한 결과는...

파악

• 사실 문제 원인에 대해 감 조차 잡지 못했다.
• VPC에서 외부로 요청을 보내기 위해 NAT 서비스를 통해 NAT IP로 외부와 통신할 수 있다고 이해했다.
• 왜 Cloud Functions 에서 VPC 연결 시, NAT Gateway를 적용한 KR-2 region의 private subnet이 적용이 되지 않는지는 이해하지 못했다....

대응

• public subnet 생성 및 public NAT Gateway 생성
  • CloudFunctions 연결 목록에 조회되지 않음
• Network ACL 변경
  • TCP 모든 IP, 모든 port에 대해 in, out 가능
  • 달라진 점 없음
• 새 VPC 생성 및 위 과정 동일하게 단계별 적용
  • 달라진 점 없음

추후

• Reference를 조금 찾아보고 진행할 예정이다.

[tonykang22]

해결

원인은...

• NAT Gateway 설정 후에 Route Table에 등록해주는 것을 하지 않았기 때문에 발생한 문제였다.
  • 차분하게 관련된 NCP의 모든 docs를 정독하면서 문제를 파악할 수 있었다.
• 다시 정리하면 : NAT Gateway란
  • NAT Gateway는 NAT(Network Address Translation) 서비스이다.
  • 외부 서비스에서 private subnet의 인스턴스로 접근할 수 있고, private subnet의 인스턴스에서 외부 서비스로는 접근할 수 있게 해주는 서비스이다.
• Route Table
  • 트래픽이 어디로 가야할지 알려주는 이정표와 같은 역할을 하며 각 서브넷을 거치는 트래픽의 라우팅 경로를 지정하는 역할을 한다.

관련된 그림을 AWS에서 찾아볼 수 있었다. (Ref : https://docs.aws.amazon.com/ko_kr/vpc/latest/userguide/VPC_Route_Tables.html)

[tonykang22]

결론

• CloudFunction을 사용하여, 인스턴스를 8개로 조절하여 사용하기로 한다.