웹 스크래핑 툴 5 선 | 웹 크롤러를 쉽게 평가 (2)
1.Getleft
Getleft는 웹사이트 그래버입니다. URL을 지정하면 전체 사이트 또는 최소한 사용자가 설정한 옵션과 일치하는 사이트의 일부를 다운로드하려고 합니다.
특징:
· 웹 사이트를 통째로 다운로드 할 수 있습니다
・다운로드한 사이트의 링크를 하드 디스크로부터 직접 열람할 수 있다
· 중단되었거나 시간 초과되면 다운로드를 다시 시작할 수 있습니다.
· 특정 유형의 파일을 다운로드하지 않도록 필터링
![](https://s1.md5.ltd/image/3cb619f732bf45162b3dfc5d15a6cc9f.png)
2.Diggernaut
Diggernaut는 웹에서 데이터 스크래핑 , 추출 및 수집 서비스를 제공합니다. 사용자를 대신하여 웹 스크래핑을 수행하여 웹 사이트에서 데이터를 추출하고 정규화하고 데이터를 클라우드에 저장할 수 있습니다. 소매점 사이트에서 제품 가격 및 기타 관련 정보, 리뷰, 평가, 다양한 통신사 웹사이트의 뉴스 및 소스 통계 데이터를 추출하는 데 도움이 됩니다.
특징:
· API 서비스 제공
· 무료 스크레이퍼 리포지토리에 기성품 솔루션 제공
· IO 서비스를 제공하고 다른 플랫폼에 데이터 입출력을 자동화
![](https://s1.md5.ltd/image/64da8f12da634c4c987546e449ca5f3a.png)
3.Websundew
WebSundew는 완전한 웹 데이터 추출 소프트웨어 및 서비스입니다. 고정밀, 빠르고 웹 데이터 스크래핑 . 전자상거래, 부동산, IT 등 다양한 웹사이트에서 정을 끌어낼 수 있는 Windows 전용 웹 스크래핑 툴입니다.
특징:
· 복잡성에 따른 가격 정책
・대행으로 데이터 추출 서비스 제공
· Eclipse를 기반으로 구축되었습니다.
![](https://s1.md5.ltd/image/35b78a03c653821d8623b675814d331f.png)
4.Easy Web Extract
Easy Web Extract는 웹 페이지에서 콘텐츠(텍스트, URL, 이미지, 파일)를 추출하고 화면을 여러 번 클릭하여 결과를 여러 형식으로 변환하는 사용하기 쉬운 웹 스크래핑 도구입니다. 프로그래밍이 필요하지 않습니다. Windows 용 스크래핑 소프트웨어입니다.
특징:
· 여러 스레드에서 데이터 스크래핑
· 언제든지 웹 스크래핑을 실행하도록 예약 할 수 있습니다.
· 상품 이미지 갤러리를 스크래핑하는 데 도움이
· (부분 문자열 선택, 대체, 분할 등)과 같은 즉시 사용할 수있는 스크립트 제공
![](https://s1.md5.ltd/image/447b0b5b3c28ac77b13f2cd6fae9b248.png)
5.Screen Scraper
사용자는 프로그래밍 등을 전혀 할 필요가 없고, 지정의 사이트와 납품 데이터·포맷을 선택하는 것만으로 스크래핑을 실행해 줍니다.
특징:
· 메소드와 API를 사용하여 외부 애플리케이션을 호출할 수 있습니다.
・크로스 플랫폼이며, 어디서나 전개할 수 있다
· .NET, Java, Ruby, PHP 또는 기타 언어에서 화면 스크래퍼를 호출합니다.
![](https://s1.md5.ltd/image/680761b6e3b225fe6fdaf341fc42a887.png)
Reference
이 문제에 관하여(웹 스크래핑 툴 5 선 | 웹 크롤러를 쉽게 평가 (2)), 우리는 이곳에서 더 많은 자료를 발견하고 링크를 클릭하여 보았다 https://qiita.com/ScrapeStorm-JP/items/87cab951d70399254779텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
우수한 개발자 콘텐츠 발견에 전념
(Collection and Share based on the CC Protocol.)