Quill-Produktseiten in Zeilen scrapen
Der Quill Produkt-Scraper macht aus Produkt- und Kategorieseiten auf quill.com Zeilen. Fügen Sie eine Produkt-URL ein oder eine Kategorieseite wie quill.com/office-supplies/cbu/2.html, eine pro Zeile - oder laden Sie eine CSV-, XLSX- oder TXT-Datei hoch -, setzen Sie ein Limit pro Abfrage, und jedes Produkt kommt als Datensatz zurück: mit der Abfrage, aus der es stammt, dem Dienst, der es erzeugt hat, dem Namen, Preis und Währung, Verfügbarkeit, Marke, sku, mpn und gtin, einer Bewertung und Bewertungszahl, einem Bild, einem Link und einer Beschreibung. Fünfzehn Spalten in der Datei und sechzehn im JSON, eine Zeile je Produkt. Anders als manche Händler auf dieser gemeinsamen Pipeline - das Werkzeug nennt Lowes, Grainger, Zalando und Fastenal - braucht Quill keinen eigenen Residential-Proxy, es gibt also außer der Liste und dem Limit nichts einzurichten.
Zwei Dinge lohnen sich zu verstehen, bevor Sie auf diesem Export aufbauen, und beide hängen daran, woher die Daten stammen. Produkte werden aus dem JSON-LD gelesen, das eine Seite über sich selbst veröffentlicht - die strukturierten Daten, die Händler einbetten, damit Suchmaschinen Preis und Lagerstatus anzeigen können. Deshalb tragen die Spalten die Namen, die sie tragen: sku, mpn, gtin, brand, availability und currency sind das Standardvokabular zur Beschreibung eines Produkts. Das setzt zugleich eine Obergrenze: Jede Spalte nach service existiert nur, wenn der Händler dieses Feld deklariert hat - ein leeres Feld heißt also nicht veröffentlicht und nicht Durchlauf fehlgeschlagen, und erneutes Laufenlassen füllt es nicht.
Das zweite ist, dass diese Seite keine Beispielwerte druckt, weil wir sie nie gegen Quill haben laufen lassen. Von den fünfundvierzig Exporten, die wir aus der gemeinsamen Pipeline hinter diesem Dienst vorliegen haben, ist kein einziger ein Quill-Durchlauf - vierundvierzig lieferten eine Kopfzeile und keine Zeilen, und der eine befüllte ist ein anderer Händler. Dieser Export ist genau eine ehrliche Beobachtung wert, und sie betrifft das Werkzeug und nicht Quill: query und service waren auf jeder Zeile befüllt, weil der Scraper sie selbst schreibt, und sechs der fünfzehn Spalten waren auf jeder Zeile leer. Rechnen Sie auch hier mit Lücken, rechnen Sie damit, dass sie anders fallen, weil ein anderer Händler andere strukturierte Daten veröffentlicht, und lassen Sie einen kleinen Durchlauf auf der kostenlosen Stufe entscheiden, welche - das ist eine Frage, die 500 kostenlose Zeilen ein für alle Mal klären.
Rechtlich gehört dies zu den leichteren Exporten in unserem Katalog. Alles Erhobene wird jedem Besucher auf einer öffentlichen Produktseite gezeigt, weder Login noch Bezahlschranke sind im Spiel, und in den fünfzehn Spalten wird nirgends eine Person genannt - reviews ist eine Zahl und kein Bewertungstext, es kommt also nicht einmal ein Bewertungstext zurück. Es geht um Produkte und Preise. Quills eigene Bedingungen regeln die automatisierte Erhebung von ihrer Website weiterhin; lesen Sie sie, bevor Sie hochskalieren, und denken Sie daran, dass Produktbeschreibungen und Bilder fremde Texte und fremde Fotografien sind, falls Sie sie weiterveröffentlichen wollen. Fangen Sie kostenlos an: Ihre ersten 500 Zeilen kosten nichts und brauchen keine Kreditkarte, danach sind es 0,002 $ je Zeile, pauschal.