Fügen Sie eine Craigslist-Such-URL ein - oder eine einzelne Anzeige - und erhalten Sie die Ergebnisse als Zeilen: den Titel, die Preisvorstellung samt Währung, den Zustand, sofern der Verkäufer einen angegeben hat, den Stadtteil, einen Link zur Anzeige, ihr Foto und eine Vorschau der Beschreibung. In der Reihenfolge, in der Craigslist sie geliefert hat.
Die Eingabe ist die Seite, die Sie sonst durchscrollen würden. Bauen Sie die Suche wie gewohnt auf Craigslist und geben Sie uns dann die Adresse.
Eine Zeile pro Anzeige, versehen mit der Abfrage, aus der sie stammt, und nummeriert in der Reihenfolge, in der Craigslist sie geliefert hat - so übersteht das Ranking den Weg in die Tabelle.
Preisvorstellung und Währung kommen als eigene Spalten, aus einer Suche wird also eine Verteilung statt einer Seite zum Überfliegen. Lesen Sie zuerst den Hinweis zum Sentinel -1 - das ist das Einzige, was einen Durchschnitt verfälscht, wenn Sie es übersehen.
Craigslist versieht Anzeigen mit der Ortsangabe des Inserenten statt mit einer Postleitzahl, und genau so kommt sie durch. Eine einzige Stadtsuche verteilt sich über einen langen Schwanz von Stadtteilen - genug, um zu sehen, wo das Angebot tatsächlich liegt.
Die Zeilen sind in der Reihenfolge nummeriert, in der das Board sie ausgeliefert hat, ein wiederholter Durchlauf zeigt also, was sich bewegt hat. Genau diese Reihenfolge geht beim manuellen Kopieren immer verloren.
Was das Board über jede Anzeige zeigt: was es ist, was es kosten soll, welchen Zustand der Verkäufer angibt, wo es sich befindet und wo man es sich ansehen kann.
Zwei dieser Spalten verhalten sich auf eine Weise, die man kennen sollte, bevor man darauf aufbaut - deshalb stehen sie in der Tabelle und nicht als Stolperfalle. price ist ein String und verwendet -1 für „kein Preis angegeben“, eine naive Umwandlung in eine Zahl zieht also jeden Durchschnitt nach unten. Und description ist eine auf 500 Zeichen gekappte Vorschau, nicht die vollständige Anzeige; längere Texte brechen mitten im Wort genau bei dieser Länge ab.
Der Spaltensatz, der Sentinel und die Kappung sind Eigenschaften des Exports und gelten unabhängig davon, was Sie abfragen. Wie oft die optionalen Felder einen Wert tragen, ist eine andere Frage - das verschiebt sich mit der Kategorie, dem Board, auf das Sie zielen, und der Größe des Durchlaufs.
Die Kopfzeile des Exports, in Reihenfolge. Wo unten ein Feld als optional gekennzeichnet ist, beschreibt das, was ein Craigslist-Inserent ausfüllt - nicht den Scrape. Wie oft es einen Wert trägt, hängt vom Board, von der Kategorie und von der Größe des Durchlaufs ab.
Zwei Fallen, beide leicht zu umgehen, wenn man sie kennt. price ist ein String und trägt den Sentinel -1 für „kein Preis angegeben“, das Umwandeln der Spalte und Bilden eines Mittelwerts zieht ihn also still nach unten; filtern Sie zuerst. Und description ist eine 500-Zeichen-Vorschau, nicht die Anzeige: längere Texte enden bei genau dieser Länge, mitten im Wort. Darüber hinaus existiert position nur im JSON, ein CSV- oder XLSX-Export hat also neun statt zehn Spalten, und condition ist auf Craigslist wirklich optional und fehlt nicht etwa im Scrape - es ist ein Feld, das der Verkäufer selbst setzt.
Zielen Sie auf eine Ergebnisseite, um das Board zu nehmen, oder auf eine einzelne Anzeige, wenn Sie schon wissen, welche. Beides kommt in denselben neun Spalten zurück.
Einige Beispiele dafür, wofür ein abfragbares Kleinanzeigen-Board taugt.
Ziehen Sie jede Anzeige für das, womit Sie handeln, und lesen Sie die Preisspalte als Verteilung statt als Feed. Filtern Sie die Zeilen ohne Preis heraus, und der Abstand zwischen einem guten und einem schlechten Kauf ist kein Bauchgefühl mehr.
Die Stadtteilspalte macht aus einer Stadtsuche eine Angebotskarte. Nützlich, wenn der Unterschied zwischen einer lohnenden Abholung und einem verlorenen Nachmittag darin besteht, auf welcher Seite der Stadt sie liegt.
Lassen Sie dieselbe Suche nach Zeitplan laufen, und jeder Export ist eine datierte Momentaufnahme - wie viele Anzeigen, zu welchen Preisen, in welchem Zustand. Angebot und Preise im Gebrauchtmarkt bewegen sich schnell, und ein einzelner Durchlauf kann das nicht zeigen.
Kein Abo, kein Mindestumsatz, keine wiederkehrende Rechnung. Ihre ersten 500 Zeilen gehen auf uns - danach nach Verbrauch, zum selben Pauschalpreis wie bei jedem anderen Scraper hier.
Für jedes neue Konto, einmalig. Keine Kreditkarte nötig. Limits pro Abfrage, Datei-Upload und alle Exportformate inklusive.
Rund 2 $ pro 1.000 Anzeigen. Der Vorab-Schätzer zeigt Zeilenzahl und Credit-Kosten, bevor ein Durchlauf startet - keine Überraschungsrechnungen, keine Recheneinheiten zum Umrechnen.
Mengenpreise, dedizierte Worker und ein SLA, um viele Suchen über viele Boards nach Zeitplan zu verfolgen. Nennen Sie uns Ihre Zahlen und wir erstellen ein Angebot.
LIVESCRAPER10 an der Kasse.Gebrauchtpreise sagen nur neben einer anderen Zahl etwas aus. Diese beiden liefern sie.
Der andere große Gebrauchtmarktplatz, in derselben Form - Titel, Preisvorstellung, Stadt und ein Permalink je Artikel. Lassen Sie beide auf denselben Suchbegriff laufen, und Sie haben den lokalen Wiederverkaufsmarkt doppelt.
Der Neupreis derselben Sache im Handel. Der Abstand zwischen ihm und einer Craigslist-Preisvorstellung ist die ganze Grundlage einer Wiederverkaufsentscheidung.
Kurze Antwort: Die Anzeigen sind öffentlich - aber Craigslist schützt seine Inserate stärker als die meisten Websites, und das sollten Sie wissen, bevor Sie skalieren.
Alles, was hier erfasst wird, steht auf einer öffentlichen Craigslist-Seite und ist für jeden Besuchenden sichtbar, angemeldet oder nicht: der Titel, die Preisvorstellung, der vom Verkäufer gewählte Zustand, die Gegend, unter der inseriert wurde, das Foto und die Beschreibung. Keine Anmeldung, keine Bezahlschranke, nichts hinter einem Konto. Im gesamten Export gibt es keinen Verkäufernamen, keine Telefonnummer und keine E-Mail-Adresse - und keine Spalte dafür.
Das weisen wir lieber aus, als dass Sie es später herausfinden: Craigslist ist in der Vergangenheit gegen das automatisierte Sammeln seiner Anzeigen deutlich aktiver vorgegangen als vergleichbare Websites, und die Nutzungsbedingungen schränken es ein. Das macht öffentliche Daten nicht geheim, aber es macht dies zu einer Frage der Bedingungen mit echter Vorgeschichte - wenn Sie Volumen planen oder ein Produkt auf der Ausgabe aufbauen, holen Sie zu Ihrem konkreten Anwendungsfall Rat ein, statt sich auf eine allgemeine Regel zu verlassen.
Wir betreiben keine Drittanbieter-Tracker auf der Datenebene, und Ihre Exporte löschen sich nach 30 Tagen automatisch.
Die Fragen, die wir am häufigsten hören. Noch etwas? Sprechen Sie uns an - die Antworten schreiben Menschen, keine Bots.
500 einmalige Gratiszeilen für jedes neue Konto - ohne Verfall. Danach sind es 0,002 $ pro Zeile, nach Verbrauch - keine Karte hinterlegt, bis Sie es sagen.
Der Craigslist Scraper von Livescraper macht aus einer Kleinanzeigen-Suche einen Datensatz. Sie übermitteln eine Craigslist-Such-URL oder eine einzelne Anzeigen-URL - eine pro Zeile eingetippt oder als CSV-, XLSX-, TXT- oder Parquet-Datei hochgeladen -, setzen bei Bedarf ein Limit pro Abfrage und laden die Ergebnisse als saubere CSV-, Excel- oder JSON-Datei herunter. Eine Zeile pro Anzeige, nummeriert in der Reihenfolge des Boards.
Jede Zeile trägt den Anzeigentitel, so wie der Verkäufer ihn geschrieben hat, die Preisvorstellung samt Währung, den gewählten Zustand, sofern gesetzt, den Stadtteil, unter dem inseriert wurde, einen Link zur Anzeige, ihr Foto und eine Vorschau der Beschreibung. Neun Spalten in der Datei, mit einer zehnten im JSON, die den Ergebnisrang trägt.
Wiederverkäufer ziehen jede Anzeige für das, womit sie handeln, und lesen die Preise als Verteilung statt als Feed. Betriebsteams nutzen die Stadtteilspalte, um aus einer Stadtsuche eine Karte zu machen, wo das Angebot tatsächlich liegt. Forschende lassen dieselbe Suche nach Zeitplan laufen, denn Gebrauchtpreise bewegen sich schnell und eine einzelne Momentaufnahme kann keinen Trend zeigen.
Zwei Eigenschaften dieses Exports sollten Sie kennen, bevor Sie Code dagegen schreiben. Die Preisspalte ist ein String und nutzt -1 für „kein Preis angegeben“, eine naive Umwandlung lässt also jeden berechneten Durchschnitt nach unten driften - filtern Sie diese Zeilen zuerst. Und die Beschreibung ist eine bei 500 Zeichen gekappte Vorschau, an der Grenze mitten im Wort abgeschnitten, nicht die vollständige Anzeige. Starten Sie kostenlos: Ihre ersten 500 Zeilen kosten nichts und brauchen keine Kreditkarte, danach sind es pauschal 0,002 $ pro Zeile.