해외사이트라 캡차인지 아닌진 모르겠는데

로봇인지 확인하고있습니다... 이거때문에 계속 막히더라구요

유저에이전트, tor(이건 사이트자체에서 막은듯), 뭐 셀레니움 옵션변경 타이머설정 등 인터넷에 있는것들 해봐도 안뚫리더라구여 ㅜㅜ

체크박스 인풋태그 잡아서 체크해주는것도 안되고..

보통 어떻게들 많이 하나요? 크롤링은 그냥 야매로 한페이지만 긁는정도만 해봤어가지고

링크 타고 다시 링크타고 긁고, 뒤로가기 두번 후 옆에링크 타고 다시반복..
이런식으로 하려니까 생각처럼 잘 안되네요