C# Web Scraping Library 4.0.4.2

'Железо WebScraper представляет собой сложный каркас веб-соскоб для программирования платформы Microsoft .Net. Это позволяет разработчикам быстро создавать рабочие процессы, которые позволяют извлекать содержимое из веб-приложений и свою очередь, обратно в структурированные данные, такие как JSON, CSV, Excel и базами данных SQL.

Веб соскоб особенно полезен для сбора контента во время миграции веб-сайта, обновления системы и для заполнения полнотекстовых индексов поиска.

Железный WebScraper первенствует в C # позволяет разработчикам очистить веб-контента путем создания 1 файлов логических синхронных приложений. Веб соскоб двигатель будет управлять сотнями параллельных потоков HTTP, вежливость, прокси, повторных попыток и HTML Анализа за кулисами.

Железный WebScraper позволяет разработать для извлечения и HTLML запроса контента / XML свободно, используя один из трех методов: JavaScript стиле getElementByID, JQuery стиль CSS селекторов, и мощные XPath выражений. Ссылки и данные могут быть извлечены JSON файлов или даже в объекты C # для последующего повторного использования.

Железный WebScraper также сохраняет развивать разочарование путем внедрения Приостановка, возобновление и функции восстановления после сбоя, который может спасти несколько дней или недель данных от потери. Кроме того, веб-кэша может позволить изменения быть сумасшедшим логике скоблить рабочих мест, которые будут изменены в середине потока или даже повторно запустить после того, как завершен без каких-либо значительных трата времени или ресурсов.

Управление идентификацией для C # WebScraper пользователей легко, смешивая вместе прокси IP-адреса, заголовки запросов, агенты пользователей и даже куки в уникальных, повторно используемых идентификаторов для имитации многих пользователей, обращающихся формы ресурсов между различными географическими регионами. Пакет доступен для Microsoft .NET (C # / VB / C ++ и F #) и работает на Windows, и Azure с использованием .NET 4.5.