웹 크롤링과 파싱(parsing)

안녕하세요

 

 

웹 크롤링은

 

인터넷 상에 존재하는 다양한 웹 사이트에서 원하는 정보를 수집하는 기술이다

 

컴퓨터 프로그램을 이용해 자동화된 방식으로 정보를 수집하는데, 이는 웹 사이트의 HTML 코드를 가져와

 

원하는 정보를 추출한다.

 

예를 들어, 온라인 마케팅 업체에서 경쟁 업체의 정보를 수집, 인터넷 사용자 검색 키워드 분석하여 서비스,

 

제품 개발에 사용된다.

 

파싱(Parsing)은

 

일련의 문자열 데이터를 의미 있는 정보로 분해 해석하는 과정.

 

웹 사이트 상의 원하는 정보를 얻기 위해서 HTML 코드를 이용하는데, 파싱이 이용된다.

 

BeautifulSoup 모듈은 파싱을 수행하는 라이브러리 중 하나인데, HTML 문서의 태그, 속성, 값 등을

 

쉽게 추출하도록 도와준다