Feature/#3 batch task - Githubissues

2nd-wanted-pre-onboarding-team-A / Human-Scape-Wanted-A

휴먼스케이프 기술 과제 레포지토리입니다. 배치 스케쥴러를 사용해서 공공 API 데이터를 스크래핑하여 DB에 적재하고 원하는 데이터를 추출해 봅시다.

0 stars 1 forks source link

Feature/#3 batch task #4

Closed tasddc1226 closed 2 years ago

tasddc1226 commented 2 years ago

:: 최근 작업 주제

[x] 기능 추가
[ ] 리뷰 반영
[ ] 리팩토링
[ ] 버그 수정
[ ] 컨벤션 수정

:: 구현 목표

공공 API를 사용 데이터 DB 적재

:: 구현 사항 설명

APScheduler를 사용해서 research 앱 내에서 두가지 파일을 추가했습니다.
우선 테스트를 위해서 interval을 5초로 설정하였어요.
requests모듈을 추가했습니다. 설치 후 테스트 해주세요.

:: ISSUE

우선 DB에 적재되어지는 것까지 확인하였습니다.
하지만 이미 존재하는 데이터를 적재하려고 할 때 실제로 들어가지는 않지만 터미널 출력에서 DB instert OK문이 출력되어 집니다. 이부분 예외처리 필요할 것 같습니다.
for문 내에서 예외처리하려고 시도 했는데 출력문이 너무 많이 나와서 따로 고려해보아야 할듯 하네요

fore0919 commented 2 years ago

컴플릭트 해결후 머지 완료 !