Scrapy

Scrapy è un web di alto livello crawling e raschiando quadro per la scrittura ragni di eseguire la scansione e analizzare le pagine web per tutti i tipi di scopi, dal reperimento delle informazioni per il monitoraggio o testare siti web.

Caratteristiche :

• semplice:
• Scrapy è stato progettato con semplicità in mente, fornendo le funzioni necessarie senza ottenere nel vostro senso


• produttiva:
• Basta scrivere le regole per estrarre i dati da pagine web e lasciare Scrapy strisciare l'intero sito web per voi


• Fast:
• Scrapy viene utilizzato in crawler di produzione per raschiare completamente più di 500 siti di rivenditori al giorno, tutti in un unico server


• Extensible:
• Scrapy è stato progettato con l'estensibilità in mente e quindi fornisce diversi meccanismi per inserire il nuovo codice, senza dover toccare il nucleo quadro


• Portatile:
• Scrapy gira su Linux, Windows, Mac e BSD


• Open Source e il 100% Python:
• Scrapy è completamente scritto in Python, che lo rende molto facile da hackerare


• Well-testati:
• Scrapy ha una vasta suite di test con molto buona copertura codice

Requisiti :

• Python