入力は品番ではなくページです - 必要な製品ページやカテゴリを指定すると、ジョブが各掲載の公開内容を読み取ります。
1製品につき1行で、各行には取得元のクエリが付きます - 十数カテゴリにまたがる実行でも、入力リストと突き合わせられます。
入力は単一の製品ページでも、カテゴリや検索の URL でも受け付けます。1点を取得することとカタログのセクション全体を取得することは、入力欄の行が違うだけの同じジョブです。実行の規模と費用を決めるのは、クエリごとの上限です。
Grainger は、データセンター IP を遮断する、あるいは製品をクライアント側で描画する小売業者としてプラットフォームが名指しする4社の1つです（ほかは Lowes、Zalando、Fastenal）。リクエストはいずれにせよご自身のアドレスではなくプロキシプールから出ますが、この小売業者ではレジデンシャルの選択肢を最初から見込んでおいてください。実行の途中で気づくのは避けたいところです。
小売業者自身の品番に加えて、掲載が公開していれば mpn と gtin も入ります。同じ部品をそれぞれ独自の番号で登録している複数の仕入先の間で突き合わせられるのは、まさにこの項目です。
各行は Grainger が公開しているままの1件の掲載です。名称、価格、製造元、識別方法、そしてページがそれについて述べている内容。
各項目はレイアウトの読み取りではなくページの構造化データから来ます。だからこそカタログ全体で形が安定し、同時にそこが限界にもなります。小売業者が公開していない項目は、実行をどう設定しても現れません。下の列一覧は実際の実行エクスポートのヘッダー行であり、プラットフォームが公開している一覧でもあります。両者は完全に一致します。パーサーを書く前に、その下の注記をお読みください。
エクスポートのヘッダー行を順序どおりに、プラットフォームが公開する列一覧と照合したものです。説明は各項目が何のためのものかを述べます。書式や、どれくらいの頻度で値が入るかについては何も主張しません - 下の注記をご覧ください。
currency にあります。この辞書は名称の一覧として読んでください。中身の保証ではありません。15の名称とその順序は確かです - 公開されている列一覧と、このスクレイパーのアーカイブ済み実行すべてのヘッダー行が完全に一致します。確定していないのは Grainger の場合に何が入るかです。当社は中身の入った Grainger のエクスポートを保有していません。手元の実行は空か、同じ共有ツール上の別の小売業者のものであり、ある小売業者の構造化データは別の小売業者について何も確かなことを語りません。だからこそ、ここでは書式より仕組みが重要です。各項目は Grainger が自社ページで公開している構造化データから読み取ります。エクスポートの充実度はそれと完全に一致します。query と service は例外で、スクレイパー自身が書き込むためいずれにせよ全行に入ります。gtin や mpn が業務の要になるなら、無料枠でカテゴリを1つ実行し、作り込む前に確認してください。
URL の一覧と上限です。入力は単一の製品でもカテゴリ全体でも受け付け、上限が実行の規模と費用を決めます。
販売代理店のカタログデータを、チームが実際に抱えている問いに答えるためにどう使っているかの例をいくつか。
仕入れているカテゴリを取得し、公開価格を自社の契約表の隣に並べます。その差額は、品目ごとに見れば次の仕入先交渉のための資料そのものです。印象からより、表から論じるほうがはるかに容易です。
カテゴリをエクスポートし、代理店ごとに付け方が異なる品番ではなく mpn または gtin で結合します。それが、4社分の仕入先カタログを、誰にも突合できない4つの表ではなく1つの比較可能な一覧に変えます。
個々の製品ではなくカテゴリ URL を入力し、定期的に再実行します。動いたもの - 価格、在庫状況、あるセクションに現れた新しいブランド - が、誰かが気づかなければならない何かではなく、2つのエクスポートの差分として見えるようになります。
サブスクリプションも、最低利用額も、毎月の請求もありません。最初の500行は当社負担 - その後は従量課金で、ここにある他のスクレイパーと同じ均一料金です。
新規アカウントごとに初回のみ。クレジットカード不要。クエリごとの上限、ファイルアップロード、すべてのエクスポート形式を含みます。
1,000製品あたり約 $2。事前見積もりが実行開始前に行数とクレジット費用を表示します - 想定外の請求も、換算が必要な計算ユニットもありません。
継続的なモニタリングや非常に大規模なカタログ取得向けに、ボリューム料金、専用ワーカー、SLA をご用意します。ご希望の規模をお知らせいただければお見積もりします。
LIVESCRAPER10 をご利用ください。短い答え: 公開カタログについてははい - そしてこのエクスポートにアカウント情報、顧客情報、契約情報は含まれません。
ここで収集する項目は、検索エンジンやショッピングツールに読ませるために Grainger が自社の公開製品ページの構造化データで公開しているものです。名称、価格、在庫状況、ブランド、識別子は、ログインの有無にかかわらずページを開いた誰にでも表示されます。公開されたカタログデータを収集することは長く定着した実務であり、ここではログインもアカウントも決済も一切扱いません。
この出力に個人データは一切ありません。製品テーブルです。顧客名も、注文履歴も、契約価格もありません。いずれも公開されていないからです。ログイン時にご自身のアカウントに見えているものは、ここが読むものではありません。それは回避すべき制限ではなく、意図的な線引きです。
Grainger 自身の利用規約は自動アクセスを制限しているため、これは法律の問題であると同時に規約の問題でもあります - 同社と取引関係がある場合は、その内容をご確認ください。当社はデータ層でサードパーティのトラッカーを一切実行せず、エクスポートは30日後に自動削除されます。
最もよくいただく質問です。ほかにご不明な点は お問い合わせください - 回答を書いているのはボットではなく人間です。
Livescraper の Grainger 製品スクレイパーは、カタログ URL を製品テーブルに変えます。Grainger の製品 URL やカテゴリ URL を1行に1件貼り付けるか、CSV、XLSX、TXT、Parquet ファイルとしてアップロードし、クエリごとの行数に上限を設けて、結果を整った CSV、Excel、JSON ファイルとしてダウンロードします。リクエストはご自身のアドレスではなく共有プロキシプールから出ます。そしてこの小売業者は、レジデンシャルの選択肢が必要だとプラットフォームが示している1社です。
各行は1件の掲載です。名称、価格とその通貨、在庫状況、ブランド、小売業者自身の品番、メーカー品番、gtin、評価とレビュー数、画像、製品リンク、説明。これらの項目は Grainger が自社ページで公開している構造化データから読み取ります。だからこそカテゴリ全体で形が安定し、同時にそこが限界にもなります。掲載が公開していない項目は、そもそも収集する対象として存在しないからです。
調達チームは仕入れているカテゴリを取得し、公開価格を自社の契約表と品目ごとに突き合わせます。データチームはカテゴリをエクスポートし、代理店ごとに付け方が異なる品番ではなく mpn や gtin で結合して、複数の仕入先カタログを1つの比較可能な一覧に変えます。戦略チームはカテゴリ URL を定期的に投入し、誰かが気づくのを当てにする代わりに、2つのエクスポートの間で何が動いたかを読み取ります。
先に実務的な注意を1つ: このページは15の列とその順序を説明しており、その点はアーカイブされたエクスポートとプラットフォームの公開一覧が完全に一致しています。ただし Grainger についての書式や充填率は主張しません。根拠にできる中身の入った Grainger のエクスポートが存在しないからです。無料枠でカテゴリを1つ実行し、最初の数行を見てから作り込んでください。最初の500行は費用もクレジットカードも不要で、その後は1行 $0.002 の均一料金です。