issues
search
heehehe
/
job-trend
[DE4E] 개발자 채용공고 데이터 추출 파이프라인 구축 및 응용 프로젝트
https://job-trend.streamlit.app
34
stars
6
forks
source link
데이터 품질 관리
#42
Open
heehehe
opened
7 months ago
heehehe
commented
7 months ago
이미 추출된 채용공고 (중복되지 않도록)
여러 사이트에 올라온 동일 공고 (중복되지 않도록)
생각보다 많이는 없는듯한..?
[x] 마감공고 지난 케이스 - 데이터에서는 그대로 두고, TODAY 기준으로 대응되도록..?
job name 통합 (rule-based로?)
빅데이터 엔지니어 & 데이터 엔지니어
tech stack 통합
[x] Python & python, Aws & AWS - 모두 lowercase로 dbt에서
"C / c++" -> C, C++ 분리시키기
파이썬 & Python