Это приложение для Linux под названием Colly, последнюю версию которого можно загрузить как v2.1.0.zip. Его можно запустить онлайн на бесплатном хостинг-провайдере OnWorks для рабочих станций.
Загрузите и запустите онлайн это приложение под названием Colly with OnWorks бесплатно.
Следуйте этим инструкциям, чтобы запустить это приложение:
- 1. Загрузил это приложение на свой компьютер.
- 2. Введите в нашем файловом менеджере https://www.onworks.net/myfiles.php?username=XXXXX с желаемым именем пользователя.
- 3. Загрузите это приложение в такой файловый менеджер.
- 4. Запустите онлайн-эмулятор OnWorks Linux или Windows или онлайн-эмулятор MACOS с этого веб-сайта.
- 5. В только что запущенной ОС OnWorks Linux перейдите в наш файловый менеджер https://www.onworks.net/myfiles.php?username=XXXXX с желаемым именем пользователя.
- 6. Скачайте приложение, установите его и запустите.
СКРИНШОТЫ
Ad
колли
ОПИСАНИЕ
Colly предоставляет чистый интерфейс для написания любого типа сканера/скребка/паука. С Colly вы можете легко извлекать структурированные данные с веб-сайтов, которые можно использовать для широкого спектра приложений, таких как интеллектуальный анализ данных, обработка данных или архивирование. Чистый API. Быстро (> 1 тыс. запросов в секунду на одном ядре) Управляет задержками запросов и максимальным параллелизмом для каждого домена. Автоматическая обработка файлов cookie и сеансов. Синхронный/асинхронный/параллельный парсинг. Распределенный парсинг. Кэширование, автоматическое кодирование ответов, отличных от юникода. Поддержка robots.txt. Поддержка Google App Engine.
Особенности
- Быстро (> 1 тыс. запросов в секунду на одном ядре)
- Управляет задержками запросов и максимальным параллелизмом для каждого домена
- Автоматическая обработка файлов cookie и сеансов
- Синхронный/асинхронный/параллельный парсинг
- Распределенный парсинг
- Автоматическое кодирование ответов, отличных от Unicode.
Язык программирования
Go
Категории
Это приложение также можно загрузить с https://sourceforge.net/projects/colly.mirror/. Он был размещен в OnWorks, чтобы его можно было легко запускать в Интернете с помощью одной из наших бесплатных операционных систем.