Scrapy

Scrapy este un web nivel înalt crawling și răzuire cadru pentru scris păianjeni să acceseze cu crawlere și analiza pagini web pentru toate tipurile de scopuri, de la extragerea de informații până la monitorizarea sau testarea site-uri web.

Caracteristici :

• Simplu:
• Scrapy a fost conceput cu simplitate în minte, prin furnizarea de caracteristicile de care aveți nevoie, fără a vă stea în cale


• productiv:
• Doar scrie regulile pentru a extrage datele din paginile web, apoi permiteți-Scrapy târască tot site-ul web pentru tine

Rapid:
• Scrapy este utilizat în crawler producție pentru a îndepărta complet mai mult de 500 de site-uri retailer de zi cu zi, toate într-un singur server

Extensible:
• Scrapy a fost proiectat cu extensibilitate în minte și așa oferă mai multe mecanisme pentru a conecta noul cod fără a trebui să atingă miezul cadru

Portable:
• Scrapy ruleaza pe Linux, Windows, Mac și BSD


• Open Source și 100% Python:
• Scrapy este scris complet în Python, ceea ce îl face foarte ușor de hack

bine testate:
• Scrapy are o suita extinsă de testare cu acoperire foarte buna cod

Cerințe :

• Python