최신 릴리스를 v0.6.3.zip으로 다운로드할 수 있는 Crawlab이라는 Windows 앱입니다. 워크스테이션용 무료 호스팅 제공업체인 OnWorks에서 온라인으로 실행할 수 있습니다.
OnWorks와 함께 Crawlab이라는 이 앱을 무료로 다운로드하여 온라인에서 실행하십시오.
이 앱을 실행하려면 다음 지침을 따르세요.
- 1. 이 애플리케이션을 PC에 다운로드했습니다.
- 2. 파일 관리자 https://www.onworks.net/myfiles.php?username=XXXXX에 원하는 사용자 이름을 입력합니다.
- 3. 이러한 파일 관리자에서 이 응용 프로그램을 업로드합니다.
- 4. 이 웹사이트에서 모든 OS OnWorks 온라인 에뮬레이터를 시작하지만 더 나은 Windows 온라인 에뮬레이터를 시작합니다.
- 5. 방금 시작한 OnWorks Windows OS에서 원하는 사용자 이름으로 파일 관리자 https://www.onworks.net/myfiles.php?username=XXXXX로 이동합니다.
- 6. 애플리케이션을 다운로드하여 설치합니다.
- 7. Linux 배포 소프트웨어 저장소에서 Wine을 다운로드합니다. 설치가 완료되면 앱을 두 번 클릭하여 Wine과 함께 실행할 수 있습니다. 인기 있는 Windows 프로그램 및 게임을 설치하는 데 도움이 되는 Wine을 통한 멋진 인터페이스인 PlayOnLinux를 사용해 볼 수도 있습니다.
Wine은 Linux에서 Windows 소프트웨어를 실행하는 방법이지만 Windows가 필요하지 않습니다. Wine은 모든 Linux 데스크탑에서 직접 Windows 프로그램을 실행할 수 있는 오픈 소스 Windows 호환성 계층입니다. 본질적으로 Wine은 Windows가 필요하지 않고 모든 Windows 응용 프로그램을 실행할 수 있도록 Windows를 처음부터 충분히 다시 구현하려고 합니다.
스크린 샷
Ad
크롤랩
기술
Python, NodeJS, Go, Java, PHP를 포함한 다양한 언어와 Scrapy, Puppeteer, Selenium을 포함한 다양한 웹 크롤러 프레임워크를 지원하는 Golang 기반 분산 웹 크롤러 관리 플랫폼입니다. docker-compose를 사용하여 클릭 한 번으로 시작하십시오. 이렇게 하면 MongoDB 데이터베이스를 구성할 필요조차 없습니다. 프런트엔드 앱은 MongoDB, SeaweedFS 및 작업자 노드와 같은 다른 구성 요소와 통신하는 마스터 노드와 상호 작용합니다. 마스터 노드와 작업자 노드는 gRPC(RPC 프레임워크)를 통해 서로 통신합니다. 작업은 마스터 노드의 작업 스케줄러 모듈에 의해 예약되고 작업 실행기에서 이러한 작업을 실행하는 작업자 노드의 작업 핸들러 모듈에 의해 수신됩니다. 작업 실행기는 실제로 스파이더 또는 크롤러 프로그램을 실행하는 프로세스이며 gRPC(SDK에 통합됨)를 통해 다른 데이터 소스(예: MongoDB)로 데이터를 보낼 수도 있습니다.
기능
- 작업 일정
- 작업자 노드 관리 및 통신
- 스파이더 배치
- 프런트엔드 및 API 서비스
- 작업 실행(마스터 노드를 작업자 노드로 간주할 수 있음)
- 다른 프레임워크와 통합
프로그래밍 언어
파이썬, PHP, 자바, Go
카테고리
이것은 https://sourceforge.net/projects/crawlab.mirror/에서도 가져올 수 있는 애플리케이션입니다. 무료 운영 체제 중 하나에서 가장 쉬운 방법으로 온라인으로 실행하기 위해 OnWorks에서 호스팅되었습니다.
