Macy's führt Hunderte Marken aus Mode, Beauty, Wohnen und Schmuck - und preist sie in einer ganz eigenen Sprache aus. Dieser Service verwandelt Produktseiten in eine Tabelle: siebzehn Spalten pro Artikel, mit dem Preis zweimal - einmal genau wie angezeigt und einmal so aufbereitet, dass Sie damit rechnen können.
Fast jeder ernsthafte Fehler mit Kaufhaus-Preisdaten entsteht daraus, die Zahl zu lesen und das Wort daneben wegzuwerfen.
Macy's veröffentlicht seine eigene Preispolitik, und sie ist ungewöhnlich deutlich. Regular und Original werden als Angebotspreise beschrieben - die Ware wurde in Filialen oder auf macys.com zu diesem Preis angeboten - und Macy's sagt ausdrücklich, dass ein Artikel zu diesem Preis möglicherweise nie verkauft wurde, eine daraus errechnete Ersparnis also kein Beleg dafür ist, dass irgendjemand den höheren Betrag gezahlt hat. Wenn Sie aus einer durchgestrichenen Zahl eine Rabatttiefe bauen, messen Sie genau das: wie Macy's einen Preis darstellt, nicht wie sich ein Markt bewegt hat.
Auch darüber hinaus trägt die Wortwahl Bedeutung. Original, Closeout, Clearance, Now, Permanent Markdown und Just Reduced signalisieren allesamt eine dauerhafte Reduzierung - ein so ausgezeichneter Artikel kehrt nicht zu seinem alten Preis zurück. Everyday Value bedeutet einen dauerhaft niedrigen Preis, von dem Aktionen und Gutscheine ausgeschlossen sind, was etwas ganz anderes ist als ein Sale. Zwei Artikel mit derselben Zahl können Ihnen also Gegenteiliges darüber sagen, was als Nächstes passiert.
Genau deshalb hält der Export den Preis zweimal fest. price ist die Zeichenkette wie angezeigt, samt Währungszeichen und Trennzeichen; parsed_price ist derselbe Betrag ohne diese Formatierung, damit er korrekt sortiert und summiert. Rechnen Sie mit parsed_price und behalten Sie price, damit die Darstellung in Ihre Daten übergeht, statt beim Parsen verloren zu gehen.
Sie richten es auf Macy's-Seiten, und es gibt Ihnen eine Tabelle zurück. Es gibt keine Suchsyntax zu lernen.
Abgerechnet wird nach Zeilen - grenzen Sie die Liste also auf Macy's ein, bevor Sie exportieren, nicht danach.
Dies sind die Spalten, die der Export dieses Scrapers deklariert, in dieser Reihenfolge. Jede Beschreibung erklärt, wofür die Spalte da ist. Welche der optionalen Spalten ein Händler tatsächlich füllt, ist unterschiedlich - Marke, Bewertung, Anzahl der Bewertungen, Beschreibung und Verfügbarkeit stehen alle im Schema, und keine davon ist auf jeder Seite garantiert gefüllt.
url; dort, wo unsere Handelsexporte Zeilen geliefert haben, stimmten beide überein - behandeln Sie sie also als einen Wert, bis Sie eine Seite finden, auf der sie es nicht tun.InStock und OutOfStock sind die Werte, die unsere Handelsexporte geliefert haben. Nicht jeder Händler veröffentlicht das; dann ist die Spalte leer statt falsch.; , um die Liste zurückzubekommen.sku_code. Bei manchen Händlern sind beide gleich, bei anderen völlig verschieden - behandeln Sie sie also nicht als austauschbar.product_url.images. Praktisch, wenn Sie ein Vorschaubild pro Zeile möchten und keine Liste.Drei dieser Paare sehen redundant aus, und nur eines ist es wirklich. product_url und url stimmten überall dort überein, wo unsere Handelsexporte Zeilen geliefert haben. images und image sind eine Liste und ihr erster Eintrag, also eine Bequemlichkeit statt einer Dopplung. Aber sku_code und sku sind wirklich zwei verschiedene Kennungen - die des Händlers und die des Herstellers - und bei Händlern, die beide verwenden, stimmen sie nicht überein. Deduplizieren Sie über die Händlernummer und nicht über die, auf die sich Ihre ersten zehn Zeilen zufällig geeinigt haben.
Kaufhausdaten haben eine besondere Form, und diese vier Eigenschaften entscheiden, was der Export ehrlich tragen kann.
Die beiden Preisspalten existieren, weil ein angezeigter Preis und ein numerischer Preis verschiedene Dinge sind. price kommt so an, wie eine Kundschaft ihn sieht - Währungszeichen, Tausendertrennzeichen - was für eine Tabellenkalkulation nutzlos und für eine Leserin unverzichtbar ist. parsed_price ist derselbe Betrag ohne all das, sortiert und mittelt also korrekt. Behalten Sie beide. Den formatierten beim Parsen wegzuwerfen ist der Weg, auf dem eine Preisreihe am Ende nicht mehr sagen kann, worauf sie eigentlich geschaut hat.
Die eigene Preispolitik von Macy's besagt, dass Regular- und Original-Preise Angebotspreise sind und dass ein Artikel zu ihnen möglicherweise nicht verkauft wurde - die daraus gezeigten Ersparnisse also nicht auf tatsächlichen Verkäufen dieses Artikels beruhen müssen. Das ist der Händler, der Ihnen schriftlich sagt, eine durchgestrichene Zahl nicht als Marktbeleg zu lesen. Eine darauf gebaute Rabattkennzahl misst Merchandising-Sprache. Völlig legitim zu verfolgen, solange Sie sie als das bezeichnen, was sie ist.
brand, rating, reviews, description und availability gehören alle zu diesem Schema, und ob sie gefüllt ankommen, hängt davon ab, was die Seiten selbst veröffentlichen. Über unsere Handelsexporte hinweg hat eine Website brand in jeder Zeile gefüllt und eine andere in keiner, und availability kam sowohl als sauberer schema.org-Wert als auch gar nicht zurück. Ziehen Sie eine kleine Stichprobe, bevor Sie eine Tabelle um das Vorhandensein einer Spalte herum entwerfen.
Alle Produktbilder kommen in einem einzigen Feld images an, mit Semikolon und Leerzeichen zwischen den URLs, und image wiederholt der Bequemlichkeit halber das erste davon. Das ist in Ordnung, wenn man es weiß, und lästig, wenn nicht - ein naiver Import behandelt das Ganze als eine sehr lange URL, und jedes Bild bricht stillschweigend. Trennen Sie beim Einlesen an ; . Die Anzahl, die Sie zurückbekommen, ist selbst ein grobes Signal: Ein Produkt mit einer Fotografie und eines mit einem Dutzend stehen meist an verschiedenen Punkten eines Merchandising-Zyklus.
Wo ein Kaufhauskatalog als Tabelle nützlicher ist denn als endloses Scrollen.
Ein Export ist eine Preisliste; derselbe Export wiederholt ist eine Preisgeschichte. Rufen Sie eine Kategorie nach Zeitplan ab, gleichen Sie Zeilen über sku_code ab, und der Unterschied sagt Ihnen, was sich bewegt hat, was in den Abverkauf ging und was still verschwunden ist. Weil price die Wortwahl neben der Zahl behält, können Sie außerdem echte Reduzierungen von Artikeln trennen, die nur reduziert aussehen.
Für eine Marke, die über Macy's verkauft, ist die interessante Frage nicht der empfohlene Preis, sondern das Regal: Wie viele Ihrer Linien sind gelistet, zu welchen Preisen, mit wie vielen Fotos, und welche liegen im Abverkauf. Gruppieren Sie nach brand, sortieren Sie nach parsed_price, und Sie haben die Antwort auf einem Bildschirm - samt der Produkte, von denen Ihr eigenes Vertriebsteam vielleicht nicht weiß, dass sie reduziert sind.
Marktplätze, Vergleichsportale und Affiliate-Kataloge brauchen alle dasselbe: einen Titel, eine Beschreibung, einen Preis, ein Bild und eine Kennung. Dieser Export trägt alle fünf, dazu die Web ID, die einen Eintrag auf das eigene System von Macy's zurückführt. Trennen Sie images, behalten Sie parsed_price für den Feed und price für die Anzeige, und die Umwandlung sind ein paar Zeilen statt eines Projekts.
Kein Abo, kein Mindestumsatz, keine Lizenz pro Platz. Ihre ersten 500 Zeilen gehen auf uns - danach zahlen Sie nach Verbrauch.
Für jedes neue Konto, einmalig. Keine Kreditkarte. Alle Scraper freigeschaltet. Fünfhundert Produkte sind ein erheblicher Ausschnitt einer einzelnen Abteilung - genug, um die Form der Daten zu sehen, bevor Sie sich auf irgendetwas festlegen.
Etwa 2 $ pro 1.000 Produkte. Abgerechnet wird nach Zeilen, am günstigsten beobachten Sie eine Kategorie also, indem Sie sie zuerst auf Macy's eingrenzen und dann denselben engen Abruf wiederholen - ein wöchentlicher Export der Linien, die Sie interessieren, kostet einen Bruchteil eines monatlichen Exports von allem.
Mengenpreise, SLAs, dedizierte Worker und maßgeschneidertes Onboarding für Teams, die große Kataloge über viele Händler hinweg wiederkehrend verfolgen. Nennen Sie uns Ihre Zahlen, wir erstellen ein Angebot.
LIVESCRAPER10 an der Kasse.Derselbe Artikel ist meist an mehreren Orten zu mehreren Preisen gelistet, und ein einzelner Katalog kann Ihnen nicht sagen, welcher davon der Ausreißer ist. Diese beiden nutzen dieselbe Exportform.
Dieselben Produktfelder aus dem Katalog, an dem sich die meisten Preisvergleiche orientieren - nützlich, sobald Sie wissen müssen, ob ein Macy's-Preis wettbewerbsfähig ist.
Mode von einem reinen Online-Händler mit einem ganz anderen Rhythmus bei Reduzierungen - eine nützliche Kontrolle, wenn Sie einen Kategorietrend von der Aktionsplanung eines einzelnen Hauses trennen wollen.
Kurze Antwort: ja. Eine Produktseite ist eine Anzeige, veröffentlicht, damit sie möglichst viele lesen.
Die Produktseiten von Macy's sind öffentlich. Jede und jeder kann sie ohne Konto lesen, und das Sammeln öffentlich sichtbarer Produktinformationen für Recherche und Preisvergleiche ist seit Langem geklärte Praxis. Solange die Daten öffentlich verfügbar sind und der Vorgang die Seite nicht stört, gibt es keine Bundesgesetze dagegen.
Der Gegenstand ist hier so unstrittig, wie Scraping nur sein kann. Jede dieser siebzehn Spalten beschreibt einen Artikel zum Verkauf - seinen Namen, seinen Preis, seine Bilder, seine Kennungen. Es gibt im Export nirgends personenbezogene Daten: keine Kundschaft, keine Bewertenden, nicht einmal einen Bewertungstext. Nichts in der Datei identifiziert eine Person.
Die Nutzungsbedingungen von Macy's schränken automatisierten Zugriff ein, insofern bleibt dies eine Frage der Bedingungen. Wir rühren nichts hinter einem Login an, geben keine Bestellungen auf, betreiben keine Tracker Dritter auf der Datenebene, und Ihre Exporte löschen sich nach 30 Tagen selbst.
Die Fragen, die wir am häufigsten hören. Noch etwas? Sprechen Sie uns an - die Antworten schreiben Menschen, keine Bots.
query, sku_code, product_url, name, description, parsed_price, price, currency, availability, rating, reviews, images, brand, sku, url, image und status. Eine Zeile pro Produkt. Es ist die gemeinsame Form unserer Handels-Produktendpunkte, ein Macy's-Export passt also Spalte für Spalte zu den anderen.price ist die Zeichenkette wie angezeigt, mit Währungszeichen und Tausendertrennzeichen. parsed_price ist derselbe Betrag ohne diese Formatierung, damit er korrekt sortiert und summiert. Rechnen Sie mit parsed_price und behalten Sie price - gerade bei Macy's trägt die Darstellung einer Zahl Bedeutung, die die nackte Zahl nicht hat.sku_code ist die eigene Artikelnummer des Händlers - bei Macy's der Platz für die Web ID, die Referenznummer auf Etiketten in der Filiale und im Katalog, die einen Artikel in der Suche der Website aufruft. sku ist die Kennung des Herstellers, eine Modell- oder Teilenummer. Bei manchen Händlern tragen beide denselben Wert, bei anderen sind sie völlig verschieden - wählen Sie also bewusst eine als Schlüssel, statt anzunehmen, dass sie übereinstimmen.; , und Sie haben die Liste. image enthält bereits das erste davon, falls Sie nur ein Vorschaubild pro Zeile brauchen.brand, rating, reviews, description und availability hängen davon ab, was die Seiten selbst veröffentlichen - über unsere Handelsexporte hinweg hat eine Website brand in jeder Zeile gefüllt und eine andere in keiner. Ziehen Sie zuerst eine kleine Stichprobe und sehen Sie, welche Spalten gefüllt ankommen, bevor Sie um eine herum entwerfen.sku_code ist die Spalte, in der sie zurückkommt. Für die Übergabe von Aufträgen sind Produkt-URLs die eindeutige Eingabe: Eine URL löst immer genau eine Seite auf. Beachten Sie außerdem, dass nicht jeder Artikel in einer Macy's-Filiale oder im Katalog eine Web ID hat, weil nicht alles, was Macy's verkauft, online verkauft wird.Produkte einfügen, Format wählen und den Katalog als Zeilen mitnehmen - Name, Beschreibung, beide Preise, Marke, Bilder und die Kennungen, die alles zusammenhalten. Ihre ersten 500 Zeilen sind gratis.
Macy's ist eine der größten Kaufhausketten der Vereinigten Staaten, führt Hunderte Marken aus Mode, Beauty, Wohnen und Schmuck, und ihre Website ist der Katalog, an dem die meisten dieser Marken gemessen werden. Darin zu blättern funktioniert gut für einen Einkauf und schlecht für jede Frage zum Sortiment: wie eine Marke über ihre Linien hinweg bepreist ist, welcher Anteil einer Kategorie diese Woche im Abverkauf liegt, welche Artikel Fotos gewonnen oder verloren haben, was sich seit dem letzten Blick bewegt hat. Der Macys Products Scraper beantwortet das, indem er Produktseiten in eine Tabelle verwandelt - siebzehn Spalten pro Artikel, exportiert als CSV, JSON oder Excel, in derselben Form wie unsere anderen Handels-Produktendpunkte, damit ein Vergleich über mehrere Händler Spalte für Spalte zusammenpasst.
Die Entwurfsentscheidung, die man vor der Nutzung verstehen sollte, ist, dass der Preis zweimal gespeichert wird. Handelspreise werden für Menschen angezeigt, mit Währungszeichen und Tausendertrennzeichen, und diese Zeichenkette ist für eine Tabellenkalkulation nutzlos - sie zu bereinigen ist aber destruktiv, denn bei Macy's trägt die Darstellung Bedeutung. Also behält der Export beides: parsed_price ohne Formatierung, zum Sortieren und Rechnen, und price genau wie angezeigt, für alles andere. Dasselbe Prinzip erklärt das Paar aus Bildspalten, in dem images jede Fotografie zu einer semikolongetrennten Zeichenkette verbindet und image der Bequemlichkeit halber die erste wiederholt, sowie das Paar aus Kennungsspalten, in dem sku_code die eigene Nummer des Händlers und sku die des Herstellers ist - diese beiden sind bei Händlern, die beide verwenden, wirklich verschiedene Werte, und die falsche als Schlüssel zu wählen erzeugt Dubletten, die wie neue Produkte aussehen.
Das Preisvokabular von Macy's verdient besondere Sorgfalt, und Macy's selbst liefert den Grund. Die veröffentlichte Politik beschreibt Regular- und Original-Preise als Angebotspreise - die Ware wurde zu diesem Preis angeboten - und sagt, dass ein Artikel zu ihnen möglicherweise nicht verkauft wurde, die dagegen gezeigten Ersparnisse also nicht auf tatsächlichen Verkäufen beruhen müssen. Dieselbe Politik unterscheidet eine Reihe von Begriffen, die eine dauerhafte Reduzierung signalisieren - darunter Original, Closeout, Clearance, Now, Permanent Markdown und Just Reduced - von Everyday Value, einem dauerhaft niedrigen Preis, von dem Aktionen und Gutscheine ausgeschlossen sind. Zwei Produkte, die dieselbe Zahl zeigen, können also auf entgegengesetzten Bahnen sein. Eine aus einer durchgestrichenen Zahl errechnete Rabattkennzahl misst Merchandising-Sprache statt Marktbewegung, was völlig in Ordnung ist, solange sie ehrlich bezeichnet wird.
Eine ehrliche Anmerkung zur Beweislage hinter dieser Seite. Jede Aussage oben ist entweder das deklarierte Schema des Exports - die siebzehn Spaltennamen, in unseren beiden Durchläufen identisch - oder eine dokumentierte Eigenschaft von Macy's selbst, aus der eigenen Preispolitik und der Web-ID-Konvention. Es gibt hier keine Macy's-Scrape-Ergebnisse, weil wir keine haben: Beide Durchläufe wurden gegen eine Platzhalter-URL statt gegen eine echte Macy's-Seite ausgeführt und gaben nichts als einen 404 zurück, und der Service ist intern als „braucht einen Residential-Proxy“ geführt. Die oben beschriebene Spaltenbedeutung wurde an verwandten Handelsendpunkten mit identischem Schema ermittelt, die gefüllte Zeilen geliefert haben - deshalb kann die Seite sagen, wofür eine Spalte da ist, ohne zu behaupten, was Macy's hineingeschrieben hat. Auf dieser Seite erscheint keine Produktzahl, kein Preis, keine Bewertung und kein Bestandswert, und es kommt keiner hinzu, solange kein echter Macy's-Export ihn belegt. Starten Sie gratis: Ihre ersten 500 Zeilen kosten nichts und brauchen keine Kreditkarte.