Baidu-Maps-Ortsdaten im großen Stil scrapen
Livescrapers Baidu Maps Scraper macht aus Kartensuchen Ortsdaten. Sie übergeben zwei Listen - die Kategorien oder Marken, die Sie suchen, und die Orte, an denen gesucht werden soll - und die Plattform kombiniert sie und sucht jede Kategorie an jedem Ort. Die Orte können eine pro Zeile getippt oder als CSV-, XLSX-, TXT- oder Parquet-Datei hochgeladen werden. Begrenzen Sie die Zeilen je Suche und laden Sie die Ergebnisse dann als saubere CSV-, Excel- oder JSON-Datei herunter.
Jede Zeile trägt neun Spalten: die von Ihnen übermittelte Kategorie und den Ort, den Ortsnamen, die Adresse, die Telefonnummer, Baidus eigene Kategoriekennzeichnung, einen Breiten- und Längengrad sowie Baidus Kennung für den Ort. Die letzte Spalte macht einen wiederholten Lauf zu einem Vergleich statt zu einem Neuanfang, denn sie übersteht es, wenn ein Betrieb seinen Namen ändert.
Expansionsteams lassen eine Kategorie gegen eine Liste von Städten laufen, um eine vergleichbare Zahl je Markt in einer einzigen Datei zu erhalten. Handelsteams setzen eine Marke in dasselbe Feld, um die Festlandfilialen einer Kette zu kartieren. Data Engineers nutzen es, um die China-Lücke in einem aus westlichen Quellen zusammengestellten Ortedatensatz zu schließen, in dem die Abdeckung auf dem Festland stark ausdünnt.
Zwei Dinge sollten Sie wissen, bevor Sie darauf aufbauen. Dieser Scraper braucht einen Residential-Proxy, idealerweise mit China-Ausgang: Baidu Maps wird in China gehostet und blockiert Rechenzentrums-IPs außerhalb Chinas, und ohne einen solchen läuft ein Lauf durch und gibt überhaupt nichts zurück, statt einen Fehler zu melden. Und weil jeder hier archivierte Export als Kopfzeile ohne Daten darunter zurückkam, benennt diese Seite die neun Spalten und sagt, wofür jede da ist, ohne für irgendeine einen Typ, eine Einheit oder ein Format zu behaupten - einschließlich der Koordinaten, deren Bezugssystem Sie aus Ihrem eigenen ersten Lauf klären sollten, bevor Sie sie gegen GPS-Daten joinen. Starten Sie kostenlos: Ihre ersten 500 Zeilen kosten nichts und brauchen keine Kreditkarte, danach sind es pauschal 0,002 $ je Zeile.