Reichen Sie eine Liste von Domains ein und erfahren Sie, womit jede Website gebaut ist - CMS, Shop-Plattform, Analytics, CDN, Hosting und Webserver, dazu eine einzelne Spalte, die alles Erkannte auflistet. Neuere Läufe ergänzen die Kategorieaufschlüsselung von BuiltWith.
Das sollten Sie wissen, bevor Sie einen Importer schreiben, denn die Spaltenzahl ist über Läufe hinweg nicht stabil.
Jeder Lauf liefert neun kleingeschriebene Spalten: domain, dann cms, ecommerce, javascript, analytics, cdn, marketing und server, und schließlich technologies - eine kommagetrennte Zusammenfassung des Erkannten. Dieser Satz ist der verlässliche Kern.
Neuere Läufe liefern diese neun plus fünfundzwanzig weitere: query und vierundzwanzig großgeschriebene Spalten mit den Kategorienamen von BuiltWith - Content Management System, Web Hosting Providers, SSL Certificates, Name Server und die übrigen. Insgesamt vierunddreißig Spalten. Das Datenverzeichnis unten führt beide Sätze auf und kennzeichnet, welcher welcher ist.
Schreiben Sie den Importer gegen die neun und behandeln Sie die fünfundzwanzig als vorhanden-falls-vorhanden. Ein Reader, der Spalten über ihre Position anspricht oder einen festen Header annimmt, bricht beim ersten Kontakt mit der anderen Form.
Eine Domain ist die gesamte Eingabe. Es gibt keine Filter zu konfigurieren.
Beide Formen funktionieren - eine reine Domain wie stripe.com oder eine vollständige URL wie https://shopify.com.
Gemessen an 9 echten Exporten mit 12 Zeilen und 9 verschiedenen Domains. Die ersten neun erscheinen in jedem Lauf; die übrigen nur in den beiden jüngsten.
Shopify.Shopify.Next.js und jQuery.Google Analytics und Google Tag Manager.Cloudflare und CloudFront.Intercom.nginx, cloudflare und Vercel.analytics.cdn.cms.Google Workspace in jeder uns vorliegenden Zeile der neueren Form.Next.js.en-US und en.Viewport Meta in jeder uns vorliegenden Zeile der neueren Form.Klarna.Robots.txt. Beachten Sie den Unterstrich im Spaltennamen.HTTPS.nginx und Cloudflare.Google Search Console, Facebook.nginx und cloudflare.Intercom.ecommerce. Beachten Sie den kleinen Anfangsbuchstaben im Spaltennamen.HTML5 Video. Beachten Sie die Leerzeichen um den Schrägstrich im Spaltennamen.Absolute Zahlen, keine Prozentwerte. Die neuere Form mit 34 Spalten kommt in nur 4 der 12 uns vorliegenden Zeilen vor - eine viel zu kleine Stichprobe für eine Quote. Deshalb sagt diese Tabelle „in allen vier leer", wo genau das gemessen wurde, und behauptet nichts darüber, wie sich diese Spalten in größerem Umfang verhalten. Bei den neun kleingeschriebenen Spalten ist die Grundlage besser: über alle 12 Zeilen kam domain jedes Mal an, technologies in 10, server in 9 und cms, ecommerce sowie marketing in je 3. Lassen Sie eine Handvoll eigener Domains auf dem Free-Tier laufen, bevor Sie sich auf eine einzelne Spalte verlassen.
Jeder davon stammt aus dem Lesen der Exporte statt der Dokumentation, und genau deshalb sind sie den Platz wert.
Zwei der zwölf uns vorliegenden Zeilen kamen mit leeren Feldern zurück, außer domain - auch technologies war leer. Das ist ein echtes Ergebnis und kein Fehler: Die Seite hat schlicht nichts getroffen. Behandeln Sie eine leere Zeile als normales Resultat statt als fehlgeschlagene Abfrage, dann passt Ihre Zeilenzahl weiterhin zur Eingabe.
Dieselbe Domain, zweimal ausgeführt, lieferte dieselben vier Nameserver in zwei verschiedenen Reihenfolgen innerhalb von Name Server. Splitten Sie am Komma und vergleichen Sie als Menge - ein String-Vergleich dieses Feldes meldet eine Änderung, die es nicht gab.
In einem Export kam Copyright als hds-text--md">© zurück - ein Fragment eines HTML-Klassenattributs, das zufällig neben dem Zeichen stand, und keine Copyright-Angabe. Zeigen Sie dieses Feld nicht ungeprüft an und lesen Sie keinen Firmennamen daraus.
cms und Content Management System beschreiben dieselbe Erkennung, ebenso cdn und Content Delivery Network. Die Werte sind nicht immer gleich geschrieben: Eine Zeile führte server als cloudflare und Web Hosting Providers als Cloudflare. Normalisieren Sie die Groß- und Kleinschreibung, bevor Sie darüber verknüpfen oder gruppieren.
Wo das Wissen um den Unterbau einer Website verändert, was Sie als Nächstes tun.
Wenn Ihr Produkt an eine bestimmte Plattform andockt, ist die Plattform das Qualifizierungskriterium. Eine Domainliste laufen zu lassen und nach cms, ecommerce oder analytics zu filtern trennt die Accounts, bei denen Ihre Integration heute funktioniert, von denen, bei denen es eine Migration wäre - zwei sehr verschiedene Gespräche, und vor der ersten E-Mail zu wissen.
Lassen Sie jede Domain einer Branche laufen und zählen Sie die Werte in cms, cdn und server. Das Ergebnis ist ein Bild davon, worauf sich dieser Markt geeinigt hat - gezogen aus den Websites selbst statt aus Anbieter-Fallstudien. Und die Ausreißer sind meist der interessante Teil.
Bevor Sie Entwicklungszeit in eine Partnerintegration stecken, hilft es zu wissen, was auf der anderen Seite steht. Eine Zeile nennt Ihnen Hosting, CDN, Server und Analytics einer Website - oft genug, um eine Unverträglichkeit früh zu erkennen oder zu bestätigen, dass es keine gibt.
Kein Abo, kein Mindestumsatz, keine Lizenz pro Platz. Ihre ersten 500 Zeilen gehen auf uns - danach zahlen Sie nach Verbrauch.
Für jedes neue Konto, einmalig. Keine Kreditkarte nötig. Es lohnt sich, ein paar davon auf Domains zu verwenden, deren Stack Sie bereits kennen - so sehen Sie, welche Spalten sich für die Art von Websites füllen, die Sie interessiert.
Rund 2 $ pro 1.000 Domains, eine Zeile je Domain - exakt zu kalkulieren, denn auch eine Domain ohne Treffer liefert genau eine Zeile.
Mengenpreise, SLAs, dedizierte Worker und maßgeschneidertes Onboarding für Teams, die ein großes Domain-Set planmäßig erneut prüfen. Nennen Sie uns Ihre Zahlen, wir erstellen ein Angebot.
LIVESCRAPER10.Dieser Service sagt Ihnen, worauf eine Website läuft. Diese beiden sagen Ihnen, wem sie gehört und wie sie abschneidet.
Zwanzig firmografische Spalten aus derselben Eingabe - Name, Branchen-Token, Mitarbeiterzahl, Gründungsjahr, Umsatz, Adresse und Social-Media-Profile. Stack plus Firmografien qualifiziert einen Account weit besser als jedes für sich.
Rang- und Engagement-Schätzungen für dieselbe Domain - globaler, Kategorie- und Länderrang samt ihrer Veränderung. Womit eine Website gebaut ist, neben der Frage, wie sie im Vergleich zu ihresgleichen abschneidet.
Eine der leichteren Fragen im Katalog, und es lohnt sich zu sagen, warum, statt es nur zu behaupten.
Womit eine Website gebaut ist, veröffentlicht die Website selbst. Ein Server-Header, ein Script-Tag, ein Viewport-Meta-Tag und ein DNS-Eintrag sind alles Dinge, die ein Browser bei jedem Besuch liest - die Erkennung hier ist dieselbe Beobachtung, nur bewusst gemacht und festgehalten. In diesen Spalten stecken keine personenbezogenen Daten: Sie beschreiben Software und Infrastruktur, keine Menschen.
Zwei ehrliche Vorbehalte. Die Spalte Copyright übernimmt eine Zeile von der Seite, und auf einer Ein-Personen-Website kann diese Zeile eine Person benennen - behandeln Sie solche Zeilen mit derselben Sorgfalt wie Kontaktdaten. Und Name Server sowie Email Hosting Providers beschreiben die Infrastruktur einer Domain: öffentlich, aber auch die Art Detail, mit der man umsichtig umgeht, wenn man veröffentlicht statt analysiert.
Auf unserer Seite: nur öffentlich zugängliche Quellen, nichts hinter einem Login, keine Drittanbieter-Tracker auf der Datenebene, und Ihre Exporte löschen sich nach 30 Tagen automatisch.
Die Fragen, die wir am häufigsten hören. Noch etwas? Sprechen Sie uns an - die Antworten schreiben Menschen, keine Bots.
domain, cms, ecommerce, javascript, analytics, cdn, marketing, server und technologies. Neuere Läufe ergänzen query plus vierundzwanzig großgeschriebene Kategoriespalten - insgesamt vierunddreißig. Das Datenverzeichnis auf dieser Seite führt sie alle auf und kennzeichnet, zu welchem Satz jede gehört.technologies. Zwei der zwölf uns vorliegenden Zeilen kamen so zurück. Das ist ein echtes Ergebnis und kein Fehler, und es sorgt dafür, dass Ihre Ausgabezeilenzahl weiterhin zur Eingabe passt.technologies ist eine kommagetrennte Zusammenfassung des Erkannten. Für alles Programmatische verarbeiten Sie die Einzelspalten. Der Inhalt der Zusammenfassung hängt davon ab, welche Form der Lauf geliefert hat, sodass dieselbe Domain in einem späteren Lauf eine andere Zeichenfolge ergeben kann, auch wenn sich an der Website nichts geändert hat.Fügen Sie Ihre Domains ein und erhalten Sie CMS, Shop-Plattform, Analytics, CDN und Server hinter jeder einzelnen. Ihre ersten 500 Zeilen sind kostenlos - genug, um zu prüfen, welche Spalten sich für die Art von Websites füllen, die Sie interessiert.
Zu wissen, womit eine Website gebaut ist, verändert, wie man auf sie zugeht. Ein Interessent, der bereits die Shop-Plattform einsetzt, in die Ihr Produkt integriert, ist ein anderes Gespräch als einer, der erst migrieren müsste; ein Wettbewerber, der sich auf ein bestimmtes CDN und einen bestimmten Analytics-Stack festgelegt hat, sagt etwas darüber aus, wie der Markt funktioniert, in dem er sich bewegt. Der BuiltWith Scraper sammelt das in großem Umfang. Reichen Sie eine Liste von Domains ein - eine reine Domain wie stripe.com oder eine vollständige URL wie https://shopify.com funktionieren beide - und jede kommt als einzelne Zeile zurück, die die auf dieser Website erkannten Technologien beschreibt.
Jeder Lauf liefert neun Spalten: die Domain selbst, dann CMS, Shop-Plattform, JavaScript-Framework oder -Bibliothek, Analytics und Tag-Management, CDN, Marketing-Widgets und Webserver, und schließlich eine kommagetrennte Zusammenfassung von allem Gefundenen. Neuere Läufe liefern diese neun plus fünfundzwanzig weitere - die eingereichte Anfrage zurückgegeben und vierundzwanzig Spalten mit den Kategorienamen von BuiltWith, darunter Content Management System, Email Hosting Providers, Frameworks, Language, Mobile, Name Server, Payment, SSL Certificates, Web Hosting Providers, Web Master Registration, Widgets und Audio / Video Media. Dieses Verhalten mit zwei Formen ist das Wichtigste, was man vor dem Schreiben eines Importers verstehen sollte: gegen die neun programmieren, die immer da sind, und den Rest als optional behandeln - denn ein Reader, der einen festen Header annimmt, bricht beim ersten Kontakt mit der anderen Form.
Vier Details sollte man vorher kennen, alle in echten Exporten beobachtet und nicht der Dokumentation entnommen. Eine Domain, bei der nichts erkannt wird, erzeugt trotzdem eine Zeile, in der nur die Domainspalte gefüllt ist - ein gewöhnliches Ergebnis, kein Fehlschlag, und es hält die Ausgabezeilenzahl deckungsgleich mit der Eingabe. Die Nameserver in einem einzelnen Feld kommen zwischen Läufen derselben Domain in unterschiedlicher Reihenfolge zurück, diese Spalte sollte also am Komma gesplittet und als Menge verglichen statt als String differenziert werden. Die Spalte Copyright ist nicht verlässlich: In einem Export lieferte sie ein Fragment eines HTML-Klassenattributs, das zufällig neben dem Copyright-Zeichen stand, sie sollte also nicht ungeprüft angezeigt und nicht nach einem Firmennamen durchsucht werden. Und die klein- und großgeschriebenen Spaltensätze überschneiden sich: Sie beschreiben dieselben Erkennungen mit gelegentlich abweichender Schreibweise der Werte, was zählt, wenn Sie darüber gruppieren oder verknüpfen.
Rechtlich gehört das zu den leichteren Services im Katalog, aus einem einfachen Grund: Womit eine Website gebaut ist, ist eine Information, die die Website jedem Besucher mitteilt. Ein Server-Header, ein Script-Tag und ein DNS-Eintrag werden von jedem Browser bei jedem Besuch gelesen; sie bewusst festzuhalten ist dieselbe Beobachtung, nur aufgeschrieben. Keine der Spalten beschreibt eine Person. Die beiden erwähnenswerten Vorbehalte sind, dass die Spalte Copyright eine Zeile von der Seite übernimmt und auf einer Ein-Personen-Website eine Person benennen kann, und dass Infrastrukturdetails wie Nameserver und Mail-Hosting zwar öffentlich sind, aber Überlegung verdienen, wenn Sie sie veröffentlichen statt auswerten wollen. Nichts hinter einem Login wird berührt, keine Drittanbieter-Tracker laufen auf der Datenebene, und Exporte löschen sich nach 30 Tagen automatisch. Starten Sie kostenlos: Ihre ersten 500 Zeilen kosten nichts und brauchen keine Kreditkarte.