order-manager's bottle neck : Zinc API

order-manager의 과정 중 대부분의 시간은 Zinc API에 의해 사용된다.

쿠팡에서 고객이 상품 구매한 것을 인지 ~ 배대지에 배송 요청 후 선 송장을 받아오기까지의 시간
- 아마존 상품 검증 과정 (Rainforest) : 약 6초 소요 (참고 : #134 )
- 검증 완료 제품 Zinc API 로 구매 과정 : 약 8분 소요 (참고 : #135 )
  - 결제 요청(POST)시 반환되는 request_id로 추후 처리 과정을 추적할 수 있다.
  - 결제 요청(POST) ~ 반환된 값으로 "Retrieving an order"(GET) 했을 때 "processing"의 응답이 아닌 "failure" 응답이 오기까지의 시간
- 오마이집 배대지 요청 처리 과정 : 추후 오마이집 API 연동 후 확인 예정
  - 요청의 응답으로 선송장 번호를 반환하는 것으로 미루어보아, 1분 이내로 소요되지 않을까 조심스럽게 예측해본다. (추후 확인으로 간단하게 검증할 수 있기에 간략하게 넘어가도록 한다.) (참고 : #140 )
- 현재 runner가 5분 단위로 쿠팡에서 고객이 구입한 상품 정보를 가져오고 있다.

외부 API 프로세스의 수행 시간이 오래 걸리는 것으로, 내부적으로 이 시간을 줄이기 위한 방안이 딱히 존재 하지 않는다.
그러나 프로덕션 레벨에서 위 사항이 정말 문제점으로 인지된다면, 추후 코드레벨 수준이 아닌 API 사용 방법에 대한 새로운 방안을 찾아 적용해볼 수 있기 때문에 이슈를 남긴다.
- "새로운 방안"을 적용하는 것은 매우 복잡하기 때문에, 추후 문제로 발생하면 적용하기로 결정.
- e.g. Amazon 계정을 2개 이상 사용하는 방법 등.
아래에는 파악한 경위 및 자세한 내용을 서술해두었다. (참고 : #135 )

Create an Order (By Postman)

POST 요청 (Create an Order)

요청의 반환 값

반환 값으로 GET 요청 - 처리 도중 (Retrieve an Order)

추후 amazon 개인 계정이 아닌 Zinc에서 제공하는 "Zinc Managed Account"를 사용할 예정인데,
Request was placed onto the queue and will launch when the retailer account is no longer busy with other requests.
로 미루어 보았을 때, 시간이 추가적으로 들 수 있을 것으로 판단 (Zinc API의 모든 고객 마다 Managed Account를 새로 부여하지 않는 이상 거래량은 개인의 계정보다 많을 것이다.)

Zinc Managed Account에 대한 document는 많지 않기 때문에 이애 대해 문의해둔 상황 (추후 업데이트 예정)

{
"_type": "error",
"code": "request_processing",
"message": "Request is currently processing and will complete soon.",
"data": {},
"request_id": "cf062464e945eeeb96dbef2b643f13ad",
"request": {
    "retailer": "amazon",
    "shipping_address": {
        "first_name": "Tony",
        "last_name": "Kang",
        "address_line1": "77 Massachusetts Avenue",
        "address_line2": "",
        "zip_code": "02139",
        "city": "Cambridge",
        "state": "MA",
        "country": "US",
        "phone_number": "5551230101"
    },
    "billing_address": {
        "first_name": "William",
        "last_name": "Rogers",
        "address_line1": "84 Massachusetts Ave",
        "address_line2": "",
        "zip_code": "02139",
        "city": "Cambridge",
        "state": "MA",
        "country": "US",
        "phone_number": "5551234567"
    },
    "is_gift": true,
    "products": [
        {
            "product_id": "B07N86GL5T",
            "quantity": 1,
            "variants": []
        }
    ],
    "payment_method": {
        "expiration_month":,
        "expiration_year":,
        "name_on_card": "Kang Sang Woong",
        "use_gift": false
    },
    "shipping": {
        "order_by": "price",
        "max_days": 5,
        "max_price": 1000
    },
    "retailer_credentials": {
        "email": "",
        "tags": []
    },
    "zma_flags": [],
    "max_price": 0,
    "retry_request_ids": [],
    "bundled_order_ids": [],
    "auto_retry_settings": {
        "retry_delays": [
            0,
            0
        ]
    },
    "_created_at": "2022-05-13T03:30:11.278Z",
    "promo_codes": [],
    "free_gifts": [],
    "scheduled_delivery_windows": []
},
"status_updates": [
    {
        "_created_at": "2022-05-13T03:30:11.494Z",
        "type": "request.queued",
        "message": "Request was placed onto the queue and will launch when the retailer account is no longer busy with other requests.",
        "data": {}
    },
    {
        "_created_at": "2022-05-13T03:30:12.094Z",
        "type": "request.launched",
        "message": "Initiated the request on the retailer.",
        "data": {}
    }
]
}

반환 값으로 GET 요청 - 처리 완료 (Retrieve an Order - 8분 소요)

"Create an order" 요청 후 약 8분이 지나서야 max_price error 반환
- 이메일로 받은 설명에 따르면 max_price error은 Zinc API에서 마지막으로 검증하는 값으로
- 이후 실제 카드 결제의 시간을(통상 인터넷 카드 결제 시간고 유사하다고 가정하면 약 10초) 제외하면,
- 아마존에서 물건 주문하는데 소요되는 시간은 약 8분이라고 볼 수 있다.
- 다른 환경 및 상황(시간대 등)에 따라 시간이 변경될 수 있으므로 추후 테스트에서도 시간 부분을 확인해볼 예정

참고할 만한 내용으로는,

HAWS에서 자주 사용될 기능은 아니지만 신기한 기능

AWS S3를 통해 screenshot_urls을 제공하여 어떤 상황에서 오류가 났는지 정황적으로 쉽게 파악할 수 있게 해준다.
(오류가 나기 전까지의 과정 중, 특정 과정 상황 진행 중 스크린샷을 찍어 저장하고 제공해준다. 즉, 어느 상황까지 성공했는지 스크린샷으로 자세한 단계를 짐작할 수 있다.)

이러한 점들로 미루어 보았을 때 Zinc API는 "Mouse and keyboard automation" 등으로 만들어지지 않았을까 조심스레 추측해본다.

{
"_created_at": "2022-05-13T03:38:29.265Z",
"_type": "error",
"account_status": {
"prime": false,
"business": false,
"has_tax_exemption_optout": false,
"has_tax_exemption_warning": false,
"fresh": false,
"charity": null
},
"code": "max_price_exceeded",
"data": {
"order_response": null,
"price_components": {
"converted_payment_total": 4249,
"tax": 250,
"product_subtotals": {
    "B07N86GL5T": 3999
},
"payment_currency": "USD",
"currency": "USD",
"products": [
    {
        "price": 3999,
        "seller_id": "ATVPDKIKX0DER",
        "product_id": "B07N86GL5T",
        "quantity": 1
    }
],
"shipping": 0,
"total": 4249,
"subtotal": 3999
},
"current_url": null,
"max_price": 0
},
"host": "zincapi-prod-1.srv.zinc.io",
"message": "The retailer's final price exceeds the maximum price. Make sure you are passing a value in cents (e.g. 9500 to represent $95.00).",
"offers_urls": [
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_B07N86GL5T_offers.json"
],
"request": {
"retailer": "amazon",
"shipping_address": {
"first_name": "Tony",
"last_name": "Kang",
"address_line1": "77 Massachusetts Avenue",
"address_line2": "",
"zip_code": "02139",
"city": "Cambridge",
"state": "MA",
"country": "US",
"phone_number": "5551230101"
},
"billing_address": {
"first_name": "William",
"last_name": "Rogers",
"address_line1": "84 Massachusetts Ave",
"address_line2": "",
"zip_code": "02139",
"city": "Cambridge",
"state": "MA",
"country": "US",
"phone_number": "5551234567"
},
"is_gift": true,
"products": [
{
    "product_id": "B07N86GL5T",
    "quantity": 1,
    "variants": []
}
],
"payment_method": {
"expiration_month":,
"expiration_year":,
"name_on_card": "Kang Sang Woong",
"use_gift": false
},
"shipping": {
"order_by": "price",
"max_days": 5,
"max_price": 1000
},
"retailer_credentials": {
"email": "",
"tags": []
},
"zma_flags": [],
"max_price": 0,
"retry_request_ids": [],
"bundled_order_ids": [],
"auto_retry_settings": {
"retry_delays": [
    0,
    0
]
},
"_created_at": "2022-05-13T03:30:11.278Z",
"promo_codes": [],
"free_gifts": [],
"scheduled_delivery_windows": [],
"_finalized_at": "2022-05-13T03:38:29.340Z",
"_last_updated_at": "2022-05-13T03:38:29.340Z"
},
"screenshot_urls": [
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_login_0.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_post_login_0.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_login_1.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_post_login_1.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_enter_address_2.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_enter_address_2.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_empty_cart_2.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_added_to_cart_B07N86GL5T_2.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_account_status_3.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_grab_mid_list_3.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_use_payment_4.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_before_select_shipping_4.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_after_select_shipping_5.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_place_order_5.jpg",
"https://zincapi.s3.amazonaws.com/cf062464e945eeeb96dbef2b643f13ad_expected_error_max_price_exceeded_5.jpg"
],
"request_id": "cf062464e945eeeb96dbef2b643f13ad",
"status_updates": [
{
"_created_at": "2022-05-13T03:30:11.494Z",
"type": "request.queued",
"message": "Request was placed onto the queue and will launch when the retailer account is no longer busy with other requests.",
"data": {}
},
{
"_created_at": "2022-05-13T03:30:12.094Z",
"type": "request.launched",
"message": "Initiated the request on the retailer.",
"data": {}
},
{
"_created_at": "2022-05-13T03:38:29.475Z",
"type": "request.finished",
"message": "The request completed and returned a response.",
"data": {
    "success": false
}
}
],
"stats": {
"start_time": "2022-05-13T03:30:11.278Z",
"end_time": "2022-05-13T03:38:29.265Z",
"launch_time": "2022-05-13T03:30:12.094Z",
"run_duration": 497.171,
"full_duration": 497.987,
"queue_duration": 0.816
}
}

tonykang22 / hello-world-auto-store

[order-manager] order-manager's bottle neck : Zinc API #31

order-manager's bottle neck : Zinc API

order-manager의 과정 중 대부분의 시간은 Zinc API에 의해 사용된다.

Create an Order (By Postman)

POST 요청 (Create an Order)

요청의 반환 값

반환 값으로 GET 요청 - 처리 도중 (Retrieve an Order)

반환 값으로 GET 요청 - 처리 완료 (Retrieve an Order - 8분 소요)

ZMA (Zinc Managed Account) 관련

결론