본문 바로가기

#웹크롤링#웹#자바#개발#소프트웨어#웹크롤러#웹스크랩핑

웹 크롤링(WEB SCRAPING)이란 웹 크롤링( web scraping) 이란?? 컴퓨터 소프트웨어 기술로 웹 사이트들에서 원하는 정보를 추출하는 것!!! 쉽게 말하면각 페이지 개발자검사 로 보면 HTML 형태로 보여지는데이런 소스들은 어떤 정형화된 형태로 관리하기에 이런 정형화된 규칙을 분석해서 원하는 정보를 추출해오는 것을 웹 크롤링이다(더쉽게 페이지에 원하는 정보만 뽑아온다) 예를 들면 현재 영화 순위 사이트에서 자료가 필요하다고하면 하나하나씩 찾아서 DB 에 담아서 할수도 있지만딱 우리는 영화제목 평점 장르 배우만 필요하다고 할 때개발자 소스로 분석을 해서 원하는 정보를 뽑아온다고 생각하면 좋겠다 웹 크롤러란? 인터넷에 있는 웹페이지를 방문해서 자료를 수집하는 일을 하는 프로그램을 지칭한다.페이지 단 하나만 방문하는 것이 아니라 페.. 더보기

티스토리툴바