C# Web Scraping Library 4.0.4.2

'Iron WebScraper is een geavanceerde web-scraping kader voor het Microsoft .Net platform programmering. Het stelt ontwikkelaars in staat om snel workflows die stofgehalte van webapplicaties en zijn beurt is weer in gestructureerde data, zoals JSON, CSV, Excel en SQL databases.

Web schrapen is vooral handig voor het verzamelen van de inhoud tijdens de website migraties, systeemupgrades en voor het vullen van full-text search indexen.

Iron WebScraper blinkt uit in het toestaan ​​van C # ontwikkelaars om web content te schrapen door het creëren van 1 bestand logisch, synchrone toepassingen. Het web schrapen motor zal honderden parallelle http draden, beleefdheid, proxy's te beheren, retry pogingen en html ontleden van achter de schermen.

Iron WebScraper laat de ontwikkeling te halen en vraag HTLML / XML-inhoud vlot via een van de drie methoden: Javascript stijl getElementById, jQuery stijl CSS selectors, en krachtige XPath expressies. Links en gegevens kunnen worden uitgepakt naar JSON bestanden of zelfs in C #-objecten voor later hergebruik.

Iron WebScraper bespaart ook de ontwikkeling van frustratie door de uitvoering Pauze, Hervatten en crash recovery functies die dagen of weken van data kan redden van verloren. Daarnaast kan een web-cache Laat veranderingen aan mad een schrapen banen logica tot medio stroom worden gewijzigd of zelfs opnieuw uit te voeren na voltooid zonder enige significante verspilling van tijd en middelen.

Identiteitscontrole voor C # WebScraper gebruikers eenvoudig, met elkaar te mengen proxies IPs, vraagt ​​headers, user agents en zelfs koekjes in unieke, herbruikbare identiteiten voor veel gebruikers toegang tot een resource vorm over geografische regio's te simuleren. Het pakket is beschikbaar voor Microsoft .Net (C # / VB / C ++ & F #) en werkt op Windows Azure en het gebruik van .Net 4.5. Daarnaast is volledig het onderdeel ondersteuning voor Linux, Mac en BSD gebruik van Mono en .Net Core runtimes.