Selenium1 [Java] 크롤링 crawling, 셀레니움 Selenium [Java] 크롤링 crawling, 셀레니움 Selenium 웹 크롤링의 정식 명칭은 Web Scraping이며, 웹 사이트에서 원하는 정보를 추출하는 것을 의미한다. 보통 웹 사이트는 HTML기반이기 때문에 정보를 추출할 페이지에서 개발자모드 실행 후 원하는 정보를 가지고 있는 태그를 검색하는 스킬이 요구된다. 크롤링을 할 때에 크롤링한 데이터를 소장, 활용하는 것은 불법이 아니지만, 해당 데이터를 배포할 경우 문제가 될 수 있다. 때문에 이러한 경우에는 해당 사이트의 허락을 반드시 맡아야 한다. 목차 목차1 목차2 웹 크롤링 라이브러리의 종류 웹 크롤링 라이브러리는 Jsoup, Selenium 2가지가 있다. Jsoup 정적인 자료를 수집하는 경우에 주로 사용한다. 정적 데이터를 비교적 빠르게 수집.. 2021. 2. 22. 이전 1 다음