- no such element: Unable to locate element 크롤링하다가 만나게 된 또 다른 에러..🤨 이번엔 또 무엇이 문제였을까나.. - no such element: Unable to locate element 해결방법 에러가 발생한 시점에 접근한 페이지를 확인해보았다. → 홈페이지가 공란이여서 에러가 발생한 듯 하였다. (에러가 팩스까지는 출력하고 발생하기도 했고..🤔) 그래서 exception이 발생할 수 있는 코드들에 try-catch로 예외처리를 다 넣어주었다. → 에러가 깔끔하게 해결되었다!😚😚 // 기존 코드 WebElement homepage = driver.findElement(By.xpath("//*[@id='cntntsView']/div[1]/table/tbody..

- stale element reference: element is not attached to the page document 크롤링을 하던 중, 만나게 된 에러..😫😫 - stale element reference: ~ 해결 방법 에러를 분석해보니, 뒤로가기 후 다음 게시글을 클릭할 때 에러가 발생하였다. for(int i = 101 ; i < total ; i++) { List gets = driver.findElements(By.cssSelector(".bbs_tit a")); for(int j = 0 ; j < gets.size() ; j++) { gets.get(j).click(); // 크롤링 진행 System.out.println("================================..

[Selenium] 자바(Java)에서 셀레늄(Selenium) 사용하기 [Selenium, 웹 애플리케이션 테스트를 위한 프레임 1. Selenium, 웹 애플리케이션 테스트를 위한 프레임워크 - Selenium 주입 - maven : https://mvnrepository.com/artifact/org.seleniumhq.selenium org.seleniumhq.selenium selenium-java 3.141.59 org.se.. yermi.tistory.com - XPath 쉽게 찾는 방법 Selenium으로 크롤링할 때 CssSelector도 좋지만! 해당 객체의 경로(XPath)를 사용하면 원하는 객체에 더 쉽고 빠르게 도착할 수 있다. - XPath와 full XPath의 차이 XPath..

1. Selenium, 웹 애플리케이션 테스트를 위한 프레임워크 - Selenium 주입 - maven : https://mvnrepository.com/artifact/org.seleniumhq.selenium org.seleniumhq.selenium selenium-java 3.141.59 org.seleniumhq.selenium selenium-api 3.141.59 org.seleniumhq.selenium selenium-chrome-driver 3.141.59 - 크롬 드라이버 다운로드 ChromeDriver - WebDriver for Chrome - Downloads Current Releases If you are using Chrome version 104, please downlo..

1. 크롤링을 할 RSS URL 검색(참고 : 한겨레 RSS서비스) RSS서비스 : 한겨레 RSS서비스 : 한겨레 www.hani.co.kr 2. RSS URL을 이용한 신문기사 크롤링하기 - it.java package controller; import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader; import java.net.URL; import javax.servlet.ServletException; import javax.servlet.annotation.WebServlet; import javax.servlet.http.HttpServlet; import javax.servlet.http...