Веб-скребок для C-net позволяет разработчикам .Net создавать логические, которые извлекают контент из веб-приложений и превращают его в JSON, электронные таблицы, объекты C-класса или даже S'L с помощью простого кода C и Linq. Iron WebScraper - это веб-библиотека соскабливания для платформы .Net 4.5 и Core, которая позволяет разработчикам использовать чистую, простую логику, чтобы обратить любой веб-ресурс обратно в объекты C'L. Он может извлекать страницы с помощью пошагового (если-это-то-что) рабочих процессов, легко соскабливания и разбора HTML, JavaScript, xml, RSS, PDF и офисных документов в Интернете или местных интрасетей обратно в полезные структурированные данные. Это оставляет разработчику чистые, эффективные веб-скребки приложений, которые легко понять и отладить. Библиотека веб-скребка C' Web Scraping является чрезвычайно вежливой, гарантируя, что ни один домен или IP-адрес не имеет слишком много одновременных запросов. Он разумно душит как клиент, так и сервер стороны ищет чрезмерного использования процессора и замедление до соответствующего темпа. Кроме того, он может подчиняться директивам роботов.txt включая определенные скорость сканирования бота и ограничения. Точные URL-адреса и типы содержимого, которые должны быть привязаны, могут быть установлены с использованием логических рабочих процессов и правил regex/wildcard. Экран-скрапинг облегчается с помощью контроля идентификации, автоматического управления потоками, ограничения скорости, URL-адресов, дубликатов, репет, прокси, заголовников и файлов cookie в армию виртуального браузера, который может имитировать поведение человека и даже клиентские кнопки, заполнять формы или войти в систему за стенами безопасности. Это полезно для миграции устаревших систем, заполнения объектов поиска предприятий и статистического конкурентного анализа Полная документация, поддержка и загружаемые DLLS для веб-скреппера доступны от http://ironsoftware.com/csharp/webscraper/ , в дополнение к ссылкам на пакет Nuget .Net 4.5 "с полной совместимостью Azure и Mono.
Подробная информация о программе
- Категории: Развития > Компоненты и библиотеки
- Издателя: The Iron Web Scraper Development Team
- Лицензии: Бесплатная пробная версия
- Цена: $299.00
- Версия: 4.0.4.2
- Платформы: windows