노트와 노트

[용어 정리] 크롤링(Crawling): 웹 사이트, 하이퍼링크, 데이터, 정보 자원을 자동화된 방법으로 수집, 분류, 저장하는 것. 크롤러(Crawler): 크롤링을 위해 개발된 소프트웨어. 스크래핑(scraping): 소프트웨어를 통해 대상 웹사이트와 같은 데이터 소스에서 데이터 자체를 추출하여 특정 형태로 저장하는 것. ※출처: [네이버 지식백과] 크롤링 [crawling] (IT용어사전, 한국정보통신기술협회) 웹 페이지를 크롤링하는 작업은 상당한 양의 정보들을 빠르게 수집할 수 있어 크롤링을 하는 사람 입장에서는 굉장히 편리한 기술이지만, 정보를 무단으로 복제하게 되면 지식재산권 침해 및 서버에 상당한 부담을 줄 수 있다. 실제로 우리나라에서도 크롤링 프로그램을 통해 타 회사 앱에서 제공하는 정보..