웹 하베스터는 인터넷에서 데이터를 자동으로 수집하고 추출하는 소프트웨어 프로그램을 의미하는 명사입니다. 주로 웹사이트의 정보를 대량으로 모으거나 색인화하기 위해 사용되며, '웹 크롤러(web crawler)' 또는 '웹 스크래퍼(web scraper)'와 매우 유사한 의미로 쓰입니다. 'Harvester'라는 단어 자체가 '수확하는 사람 또는 기계'를 뜻하기 때문에, 웹에서 정보를 '수확'한다는 뉘앙스를 가집니다. 이 용어는 기술적인 맥락에서 주로 사용되며, 검색 엔진 최적화(SEO)나 데이터 분석 분야에서 중요하게 다루어집니다. 웹 하베스터는 정해진 규칙에 따라 웹페이지를 방문하고, 필요한 텍스트, 링크, 이미지 등의 데이터를 추출하여 데이터베이스에 저장하는 역할을 수행합니다. 불법적인 데이터 수집이나 서버에 과부하를 주는 행위에 사용될 경우 문제가 될 수 있으므로 사용에 주의가 필요합니다.