본문 바로가기
반응형

웹스크래핑2

[python] 웹페이지 크롤링 - selenium에서 자주 사용하는 함수(1) (find_element) 이전 글에서 간단하게 Selenium를 사용하는 방법에 대해서 설명했다. https://dongdu-blog.tistory.com/5 [python] 웹페이지 크롤링 - selenium 시작하기 크롤링 업무가 막바지로 향하고있다. 그동안 너무 바빠서 글을 전혀 쓰지 못했었다.. 이제 슬슬 업무를 통해 새로 배운 것들을 정리하고 공유하려고 한다! Html에서 원하는 부분을 추출할 때는 Sel dongdu-blog.tistory.com 이번 포스팅에서는 자주 사용되는 함수들에 대해 설명하도록 하겠다. Selenium은 HTML 요소에 직접 접근하여 원하는 데이터를 스크래핑 할 수 있도록 하는 동적 크롤링 도구이다. 직접 사용자가 마우스로 웹 페이지를 조작하는 것과 유사하게 동작한다. 따라서 데이터가 화면에 .. 2023. 9. 21.
[python] 웹페이지 크롤링 - selenium 시작하기 크롤링 업무가 막바지로 향하고있다. 그동안 너무 바빠서 글을 전혀 쓰지 못했었다.. 이제 슬슬 업무를 통해 새로 배운 것들을 정리하고 공유하려고 한다! Html에서 원하는 부분을 추출할 때는 Selenium을 사용하여 얻을 수 있다. Selenium은 주로 WebDriver와 함께 사용하는 웹 스크래핑 도구이다. 나는 Chrome driver만 사용해 봤지만, 브라우저에 따라 firefox driver도 사용 가능하다고 한다. 웹 브라우저로 Chrome을 사용한다 가정하고, 현재 자신의 Chrome의 버전을 확인하여 Chrome driver를 설치한다. 1. Chrome driver 준비 1) 나의 Chrome 버전을 확인한다. 2) https://chromedriver.chromium.org/downl.. 2023. 9. 18.
반응형