Python

User-agent generator

Kyle79 2022. 12. 11. 14:24

 

 
pip install user-agent

https://domdom.tistory.com/entry/%ED%81%AC%EB%A1%A4%EB%A7%81-%ED%8C%8C%EC%9D%B4%EC%8D%AC-%ED%81%AC%EB%A1%A4%EB%A7%81-%EC%8B%9C-%EA%B8%B0%EA%B8%B0-%EC%B0%A8%EB%8B%A8-%EC%9A%B0%ED%9A%8C%ED%95%98%EA%B8%B0-fake-useragent-%EC%82%AC%EC%9A%A9%EB%B2%95user-agent-%EC%82%AC%EC%9A%A9%EB%B2%95

 

[크롤링] 파이썬 크롤링 시 기기 차단 우회하기 (fake-useragent 사용법/user-agent 사용법)

개요 파이썬에서 웹 크롤러를 만들 때 가장 큰 어려움은 역시 웹 사이트에서의 크롤러 또는 자동화 도구의 차단인 것 같습니다. 이런 경우 보통 time.sleep(3) 과 같이 몇 초간 크롤러를 쉬도록 하는

domdom.tistory.com

 

 

 

'Python' 카테고리의 다른 글

BrowserMob Proxy  (0) 2022.12.11
Selenium Wire  (0) 2022.12.11
Selenium Wire Option  (2) 2022.12.11
Selenium Chrome Option  (0) 2022.12.11
ChromeDriver & Selenium Wire setting  (0) 2022.12.11