기계는 거짓말하지 않는다

Selenium 크롤링 진행 시 창을 숨길 수 있다. # 옵션 생성 options = webdriver.ChromeOptions() # 창 숨기는 옵션 추가 options.add_argument("headless") # 옵션 지정 driver = webdriver.Chrome(driver_path, options=options)

설치 pip install selenium WebDriver Access 방법 from selenium import webdriver driver_path = "./driverDirectory" driver = webdriver.Firefox(driver_path) # 위와 동일 ''' webdriver.FirefoxProfile webdriver.Chrome webdriver.ChromeOptions webdriver.Ie webdriver.Opera webdriver.PhantomJS webdriver.Remote(driver_path) webdriver.DesiredCapabilities webdriver.ActionChains webdriver.TouchActions webdriver.Proxy ..

Selenium 다양한 브라우저, 플랫폼에서 웹 애플리케이션을 검증하는 데 사용되는 오픈 소스 자동화 테스트 프레임워크이다. Java, C#, Python 등과 같은 여러 프로그래밍 언어를 사용하여 Selenium 테스트 스크립트를 만들 수 있다. Selenium Software는 단일 도구가 아니라 소프트웨어 제품군이다. Install: pip install selenium Import: import selenium Webdriver: from selenium import webdriver 장점 1. Python, Node.js, Java 이외의 다른 프로그래밍 언어에서도 실행 가능 2. 크롬, 인터넷 익스플로러, 파이어폭스와 같은 주요 웹 브라우저 제어 가능 3. AJAX, PJAX 요청 쉽게 처리 ..

웹 크롤링(Crawling) 웹 사이트에 있는 특정 정보를 추출하는 기술을 말한다. 다양한 웹 사이트에서 Text, Image, Audio 등을 추출할 수 있다. HTML 구조를 분석하고 로그인 처리 등이 필요하다. 아래는 Selenium과 BeautifulSoup를 이용한 크롤링 예이다. 네이버 영화 순위 from selenium import webdriver from bs4 import BeautifulSoup driver_path = './chromedriver' driver = webdriver.Chrome(driver_path) driver.get('https://movie.naver.com/movie/sdb/rank/rmovie.nhn') driver.implicitly_wait(3) html..