grab-site

grab-site

grab-site는 웹 사이트를 WARC 파일로 아카이브하기위한 크롤러입니다.여기에는 여러 크롤링을 모니터링하기위한 대시 보드가 포함되어 있으며 크롤링 중에 URL 무시 패턴 변경을 지원합니다.
grab-site는 웹 사이트를 WARC 파일로 아카이브하기위한 크롤러입니다.여기에는 여러 크롤링을 모니터링하기위한 대시 보드가 포함되어 있으며 크롤링 중에 URL 무시 패턴 변경을 지원합니다.

카테고리

오픈 소스 라이센스가있는 Mac 용 grab-site의 대안