YSM-2023 / CY_crawler

0 stars 0 forks source link

Google ReCAPTCHA issue #3

Open Sunwoo0110 opened 12 months ago

Sunwoo0110 commented 12 months ago

크롤링으로 회사 IP을 통한 구글 접속이 막혔습니다..

시도한 방법은

1. 다른 와이파이로 접속

당연히 해결은 되는데, 여러 번 하면 또 막힐 것 같음

2. Recaptcha Solver 로 chrome driver 에 google extension 추가하기

extension 추가까지는 완료 되었는데, 로그인 용이여서 그런지 해결은 못함 https://velog.io/@wjddn3711/Selenium-%EC%9D%84-%ED%86%B5%ED%95%9C-%EA%B5%AC%EA%B8%80-Recaptcha-Solver

3. google.com 이 아닌 google.co.kr 로 접속

의외로 성공했음. 근데 만약 여기서 또 막히면, 내 로컬 크롬이 막힐까봐 무서워서 그냥 co.cn, co.jp 등으로 돌려가면서 할듯!!!! 아싸 심지어 com 이랑 검색 결과 거의 비슷함. 🚨50개 정도 돌리면 바로 막힘🚨

4. 기존 search url 뒤에 붙인 gl=us 조건 삭제

성공 지역 설정을 빼니까 바로 되긴 하는데.. 일단 더 돌려보고 다시 막히면 다른 방법 써야할듯

인생의 교훈: 크롤링은 카페를 돌아다니며 하자, 구글은 무섭다, 하지만 내가 이김 후훗 -> 짐

Sunwoo0110 commented 12 months ago

금방 막힘 co.jp co.in 다 막힘 우울