웹 크롤링

web상에 존재하는 contents를 수집하는 작업(필요한 데이터 추출)
- html 페이지를 가져와서, html/css등을 파싱하고 필요한 데이터 추출
- open api(rest api)를 호출해서 받은 데이터중 필요한 데이터 추출

 

 

본인은 java로 jsoup이라는 라이브러리를 이용해서 웹크롤링을 접해봄