Scrapy ➡ Erfahrungen und Bewertungen

Was ist Scrapy?

Wurde Scrapy ursprünglich ausschließlich als Lösung für Webscraping entwickelt, kann es inzwischen auch mit API genutzt werden. Damit ist das Programm zu einer zuverlässigen und leistungsstarken Datenextraktionssoftware herangereift, mit der jede:r Nutzer:in im Handumdrehen unstrukturierte Informationen aus nahezu jedem Dokument im Web in eine strukturierte Form verwandelt.

Das System basiert auf einem Open-Source- und kollaborativen Framework. Anwender:innen betreiben ihre Web Spider, integrieren diese in der Zyte Scrapy Cloud oder nutzen Scrapyd zum Hosten der Spinnen auf dem eigenen Server. Scrapy spart Zeit.

Schnell und mit viel Power schreibt der oder die Anwender:in die Regeln zur Datenextraktion mit Scrapy. Die Software übernimmt den Rest. Ohne den Kern dieses Datenextraktionssystems zu verändern, lassen sich zahlreiche neue Funktionen ganz leicht einstellen. Scrapy ist mit Python geschrieben und benötigt als Systemvoraussetzungen Linux, Mac, Windows oder BSD (Berkeley Software Distribution).