아키텍처 설계

[heehehe]

채용공고 현황 분석 대시보드 제작

• 주제 및 목표
  • linkedin이나 채용공고 사이트마다 올라오는 직군별 채용공고 분석
  • 요즘에는 이 직군에서는 어떤 자격요건을 원하는지, 어떤 기술을 요구하는지 등 채용 트렌드를 파악할 수 있는 대시보드 만들기
• 데이터 수집
  • 크롤링..?(밖에 떠오르지 않음)
  • 우선 배치로 돌고, 추후 구축되면 스트림 처리도 구현해보기
• 데이터 저장
  • bigquery
• 데이터 변환
  • 자격요건 기반 형태소 분석
  • (저장할 테이블 구조 생성하기)
• 시각화
  • 직군별 채용공고 개수, 자격요건 분석 결과 보여주기
  • 추천할만한 공부 자료도 같이 보여주기 (따로 저장해두기)

[heehehe]

데이터 수집

• https://www.wanted.co.kr/wd/[0-9]+
  • ex) https://www.wanted.co.kr/wd/99999
• https://www.linkedin.com/jobs/collections/recommended/?currentJobId=[0-9]+
  • ex) https://www.linkedin.com/jobs/collections/recommended/?currentJobId=3561475137
• 로켓펀치

[heehehe]

• 원하는 키워드 입력 -> 회사 공고들 목록 나오도록
• 링크 첨부
• snowflake trial

[heehehe]