入力ひとつ、設定ひとつ。ここには設定するプロキシがないので、作業はリンクのリストと数字だけで終わります。
上限はクエリごとです。カテゴリーURLが5件で上限が200なら、合計200件ではなく、それぞれから200件ずつになります。
先に商品リンクを集める必要はありません。カテゴリページを渡せば、そこにある商品を1件1行で処理していきます - 一覧ページが、価格で並べ替えたりブランドでまとめたりできるものに変わるということです。
この共通パイプライン上の一部の小売業者は、ご自身のレジデンシャル経路を必要とします - ツールが挙げているのはLowes、Grainger、Zalando、Fastenalです。Quillはその中に入っていません。 実行は当社のプールを通り、あなたが設定するものは何もありません。
sku、mpn、gtin はタイトルに埋もれるのではなく独立した列として届き、currency は price の中ではなく隣に並びます。それが、Quill以外のカタログと結合できるエクスポートにしているものです - もっとも、ページがそれらの項目を宣言していればの話ですが。
率直に述べておく価値があります。下のデータ辞書をどう読むべきかが変わるからです。
15の列名は確かです。二重に確認されています - このサービスについて公開されている列の配列と、その背後にある共通パイプラインから当社が保有するすべてのブックのヘッダー行によって。中身のあるブックでも空のブックでも同一です。これらの名前を軸に、安心してスキーマを組んでください。
できないのは、Quillがそこに何を入れるかをお伝えすることです。これをQuillに対して実行したことが一度もないからです。 当社が保有するエクスポートのうち、Quillの実行は一つもありません。ほとんどはヘッダーだけで行がなく、唯一中身のあるものはまったく別の小売業者です。それを取り繕う代わりに、このページは例示値も書式も一切載せていません - Quillの実行がない以上、それは創作になってしまいます。
よい知らせは、それがいかに安く決着するかです。宣言される十三の列のうちQuillが実際に公開しているのはどれか - これは小さな実行を一度おこなえば決着する問いであり、最初の500行は無料です。ひとつのカテゴリに向けて実行し、返ってきたものをご覧ください。どのページが前もって正直に語れることよりも、このエクスポートについて詳しくなれます。
名称は正確で、二重に確認されています。説明は各列が何のためのものかを述べます - 何が入るかではありません。それは当社ではなく小売業者が決めることであり、その理由は下の注記にあります。
gtin と並んで、これがエクスポートをQuill以外のカタログと結合できるものにします。このページの根拠について2つ。 まず仕組み：商品は、ページが自身について公開するJSON-LDから読み取られます - 小売業者が検索エンジン向けに埋め込む構造化データです。それが、このページが超えたふりをしない上限を定めます。service より後のすべての列は、Quillがその項目を宣言している場合にのみ存在します。したがって空欄は未公開であって、実行の失敗ではありません。次に欠落：これをQuillに対して実行したことは一度もありません。 このサービスの背後にある共通パイプラインから45件のエクスポートを保有していますが、Quillの実行は一つもありません - 44件は空で返り、唯一中身のあるものは別の小売業者です。そのエクスポートは、Quillについてではなくツールについての正直なデータ点として一つ分の価値があります：query と service はすべての行で埋まっていました。スクレイパー自身が書き込むからです - そして15列のうち6列が、すべての行で空でした。ここでも欠落を想定し、別の小売業者は別の構造化データを公開するので欠落の位置は変わると想定し、どれが空になるかは最初の無料枠の実行に教えてもらってください。このページが例示値も書式も載せていないのは、それも理由です：Quillの実行がない以上、創作になってしまいます。
URLのリストと上限。並べ替えもフィルターもプロキシ欄もありません - この小売業者では、ほかに設定するものがないのです。
このスクレイパーは、製品ページが自身について公開する構造化データ - 検索エンジンが価格や在庫状況を表示できるよう小売業者が埋め込むJSON-LDブロック - を読み取ります。列の顔ぶれがこうなっているのはそのためです。sku、mpn、gtin、brand、availability、currency は製品を記述するための標準語彙であり、当社が考案した名前ではありません。
実務上の帰結は、見越して計画すべきものです。列の良し悪しは、小売業者自身のマークアップ次第です。 ある項目がページの構造化データに欠けていれば空で返り、何度実行し直しても変わりません - それは失敗ではなく、不在です。この共通ツールから当社が保有する唯一の中身のあるエクスポートでは、15列のうち6列がすべての行で空でした。
マークアップが持っていないものが必要なら、それは別の仕事です - ユニバーサルAIスクレイパー はページそのものを読み、検索エンジン向けに宣言されたものだけでなく、あなたが指定した属性を返します。
アップロードしたファイルは入力欄を空にしません - 行はすでに入力済みの内容に追加され、重複は取り除かれません。同じファイルを2回アップロードすれば、それらのURLは本当に2回取得され、2回課金されます。これはこのパイプライン固有の挙動です：当社の他のスクレイパーにはアップロード時に重複を除くものもありますが、これは除きません。習慣を持ち込まないでください。
CSVやTXTでは行全体が一つのURLとして扱われるため、余分な列があるスプレッドシートはここでは向きません。列単位で読まれるのはXLSXだけで、そこではA列を取ります。
ファイル選択にはCSV、XLSX、TXTと並んでParquetも表示されますが、ブラウザ内では実際には読み取れず、その旨が表示されます - 他の3つのいずれかをお使いください。
仕入先のカタログが表になったとき、何ができるのか、いくつか例を。
カテゴリページを渡せば、そこにあるすべての商品が行として返り、名称の隣にブランドと識別子の列が並びます。一覧ページを、サイトが用意した以外の基準で並べ替えられること - それがまさに狙いです。
service が各行に刻まれるので、1つの表にQuillとこのパイプライン上の他の小売業者を同居させても、きれいに分けられます。mpn や gtin が宣言されているところでは、同じ商品を仕入先をまたいで突き合わせられます。
同じカテゴリURLを定期的に回せば、比較可能なファイルが2つ手に入ります。何が現れ、何が消え、何が変わったかは、午後いっぱいのクリック作業ではなく差分になります - そして公開されている場合は sku が差分の鍵です。
サブスクリプションなし、最低額なし、継続請求なし。最初の500行は当社負担で、その後は従量課金 - ここにある他のどのスクレイパーとも同じ均一料金です。
すべての新規アカウントに初回限定で。クレジットカード不要。クエリ単位の上限、ファイルアップロード、すべてのエクスポート形式を含みます - そしてこの小売業者では、支払うべきプロキシもありません。
プラットフォーム上の他のすべてのスクレイパーと同じ均一料金です。事前見積もりが、実行前に行数とクレジット費用を表示します - ここでは一度目を通す価値があります。上限はクエリごとなので、カテゴリURLのリストは掛け算になるからです。
カタログを定期的に追跡する場合は、ボリューム価格、専用ワーカー、SLAをご用意します。規模をお知らせいただければお見積もりします。
LIVESCRAPER10 をご利用ください。他の小売業者で同じように動く2つの兄弟と、構造化データに必要なものが入っていないときのための1つのツール。
同じ15列、同じJSON-LDの上限を、別のカタログで - そしてこれと同じく、ご自身のプロキシは不要です。両方を追跡するなら、service が1つのファイルの中で行を区別してくれます。
同じくこのパイプラインですが、重要な違いが1つ：Fastenalは、ご自身のレジデンシャルプロキシを必要とする4社のうちの1社です。この系列のすべてのページが同じように動くと決めてかかる前に、知っておく価値があります。
欲しい項目がそもそも構造化データに入れられていなかった場合、こちらはページ自体を読み、あなたが指定した属性を返します。固定スキーマより遅く、予測しにくくはありますが - 検索エンジン向けに宣言されたものだけに縛られません。
簡潔に言えば、これは個人データを含まない公開のカタログ情報です - しかも構造化データは、そもそも機械に読まれるために公開されています。
この15列にあるものはすべて、ログインの有無にかかわらず、公開のQuill商品ページでどの訪問者にも表示されています。ログインは使わず、ペイウォールも越えず、アカウントにも触れません。実行はあなた自身のIPではなく当社のプロキシプール経由です。具体的に読み取っているのはJSON-LDのブロック - 自動的な読み手が名称、価格、在庫状況を拾えるようにと、小売業者がまさにそのために埋め込む構造化データです。
このエクスポートには誰の名前も含まれません。 顧客の列も、レビュー投稿者の列も、販売者の列もありません - reviews は件数であってレビュー本文ではないので、レビューの本文すら返りません。商品と価格であり、データ保護の観点では軽い側に位置します。
Quill自身の規約が同社サイトからの自動収集を規律しますので、ページが公開されていることに寄りかかるのではなく、規模を広げる前にお読みください。そして商品説明や画像を再掲載するなら、それらは他者の文章と写真です - 分析のために収集することと、公開することは別の問題です。当社はデータ層でサードパーティのトラッカーを動かしておらず、エクスポートは30日後に自動削除されます。
いちばん多くいただく質問です。ほかにも何かあれば ご連絡ください - 回答を書いているのはボットではなく人間です。
Quill商品スクレイパーは、quill.com の商品ページとカテゴリページを行データに変えます。商品URL、または quill.com/office-supplies/cbu/2.html のようなカテゴリページを1行に1件貼り付けるか、CSV、XLSX、TXTファイルをアップロードし、クエリごとの上限を設定してください。各商品は、由来のクエリ、生成したサービス、名称、価格と通貨、在庫状況、ブランド、sku、mpn、gtin、評価とレビュー件数、画像、リンク、説明を持つレコードとして返ります。ファイルには15列、JSONには16列、1商品につき1行です。この共通パイプライン上の一部の小売業者と違い - ツールはLowes、Grainger、Zalando、Fastenalを挙げています - Quillにご自身のレジデンシャルプロキシは不要ですので、リストと上限のほかに設定するものはありません。
このエクスポートを土台にする前に理解しておく価値のあることが2つあり、どちらもデータの出どころに行き着きます。商品は、ページが自身について公開するJSON-LDから読み取られます - 検索エンジンが価格と在庫状況を表示できるように、小売業者が埋め込む構造化データです。列が今の名前を持つのはそのためで、sku、mpn、gtin、brand、availability、currency は商品を記述するための標準的な語彙です。同時にそれは上限も定めます：service より後のすべての列は、小売業者がその項目を宣言している場合にのみ存在するので、空のセルは未公開であって実行の失敗ではなく、再実行しても埋まりません。
2つ目は、このページが例示値を載せていないことです。Quillに対して実行したことが一度もないからです。 このサービスの背後にある共通パイプラインから保有する45件のエクスポートのうち、Quillの実行は一つもありません - 44件はヘッダーだけで行がなく、唯一中身のあるものは別の小売業者です。そのエクスポートには、正直な観察がちょうど一つ分の価値があり、それはQuillについてではなくツールについてのものです：query と service はすべての行で埋まっていました。スクレイパー自身が書き込むからです。そして15列のうち6列が、すべての行で空でした。ここでも欠落を想定し、別の小売業者は別の構造化データを公開するので位置は変わると想定し、小さな無料枠の実行に教えてもらってください - これは500行の無料枠が永久に決着させてくれる問いです。
法的な面では、これは当社のカタログの中でも軽い部類のエクスポートです。収集されるものはすべて公開の商品ページでどの訪問者にも表示されており、ログインもペイウォールも関わらず、15列のどこにも人の名前はありません - reviews はレビュー本文ではなく件数なので、レビューの本文すら返りません。商品と価格です。それでもQuill自身の規約が同社サイトからの自動収集を規律しますので、規模を広げる前にお読みください。また、再掲載するつもりであれば、商品説明や画像は他者の文章と写真である点も忘れずに。無料で始められます。最初の500行は費用もクレジットカードも不要で、その後は1行あたり一律0.002ドルです。