入力欄が 1 つと設定が 1 つ。ここには設定すべきプロキシがないので、作業はリンクの一覧と数字だけで終わります。
上限は実行単位ではなくクエリ単位です。カテゴリ URL を 5 件、上限 200 で実行すると、それぞれから 200 商品ずつであって、合計 200 商品ではありません。
リクエストはご自身のアドレスではなく共有プールを通って出ていきますし、Boots はデータセンターからの通信をブロックする、あるいは商品をクライアント側でレンダリングするとしてプラットフォームが挙げている 4 社には含まれていません。このフォームにプロキシの入力欄はなく、契約するものもありません。1 分で始められるか来週まで待つかの違いです。
sku、mpn、gtin はそれぞれ独立した列です。商品名は 2 つの小売業者が 2 通りに書くラベルですが、バーコードはそうではありません。この 3 つがあるからこそ、Boots のエクスポートを仕入先のフィードや競合のリストと、あいまい一致に頼らずに突き合わせられます。
価格と、その価格が示されている通貨は 2 つの列として届くので、後段の処理が計算の前に文字列から記号を取り除く必要はありません。同じカテゴリを後日もう一度実行すれば、2 つのファイルは列ごとにそろいます。価格を時系列で追う作業は、まさにここが土台になります。
列名はサービス自身が公表している一覧です。説明は各列が何のためのものかを述べており、何が入るかではありません。それを決めるのは私たちではなく Boots だからです。なぜこの区別がここでは普段以上に重要なのかは、下の注記で説明します。
gtin と合わせて、Boots 以外のカタログとエクスポートを突き合わせられるようにするものです。このページの根拠について 2 点。まず仕組みです。商品は、ページが自身について公開している JSON-LD(小売業者が検索エンジン向けに埋め込む構造化データ)から読み取られます。これが限界を定めており、このページはそれを超えたふりをしません。service より後の列は、Boots がその項目を公表している場合にのみ存在します。つまり空欄は公表されていないという意味であって、実行が失敗したではありません。この 2 つはまったく異なる対応を必要とします。次に欠けているものです。私たちはこれを Boots に対して実行したことがありません。このサービスの背後にある共有パイプラインのエクスポートを 45 件保有していますが、Boots の実行は 1 件もありません。44 件は空で返り、データが入っていた唯一の 1 件は別の小売業者のものです。そのエクスポートから正直に言えるのはツールについての 2 点だけで、Boots については何も言えません。query と service はすべての行で埋まっていました(スクレイパー自身が書き込むためです)。そして15 列のうち 6 列はどの行でも空でした。ここでも欠けは出るでしょうし、小売業者が違えば公開する構造化データも違うので、欠ける場所も変わるはずです。どれが欠けるかは、無料枠での最初の実行に答えさせてください。このページに例示値も書式も載せていないのは、そのためです。Boots の実行が背後にない以上、それは創作になってしまいます。
いずれも、ブラウザからコピーできるリンク 1 本から始まります。
商品リンクを 40 本入れる代わりにカテゴリ URL を送れば、棚全体がひと通りで返ります。翌月にもう一度実行すれば 2 つのファイルは列ごとにそろうので、price の差分がそのまま分析になります。スクリーンショットも、手作業の確認も、手でそろえ続けるものもありません。
名前が 2 つの小売業者間できれいに一致することはありません。gtin と mpn は一致します(公開されていれば)。だからこそここでは説明文に埋もれさせず独立した列にしてあります。まずそれで結合し、残ったものにだけ名前を使ってください。
availability と price は合わせて、実行した時点の棚の姿を表します。Boots が構造化データに在庫状況を公開しているかどうかは、最初の実行が答えを出します。列が空で返ってきたなら、それはスクレイパーの失敗ではなく小売業者が公表していないということです。
サブスクリプションも、最低利用額も、ユーザー単位のライセンスもありません。最初の 500 行は無料で、その後は従量課金です。
新規アカウントごとに 1 回。クレジットカード不要。すべてのスクレイパーが使えます。1 商品につき 1 行なので、これは 500 商品分です。何かを決める前に実際の Boots のカテゴリを実行し、15 列のうちどれが埋まって届くのかをご自身で確かめるには十分すぎる量です。
1,000 商品でおよそ 2 ドル。プラットフォーム上のどのスクレイパーとも同じ均一料金です。クエリごとの上限欄が、広いカテゴリの費用が想定を超えるのを防ぎます。探索中は設定しておき、そのカテゴリが何を返すか分かってから引き上げてください。
複数の小売業者にまたがる大きな商品ラインを同時に追跡するチーム向けに、ボリューム料金、SLA、専用ワーカー、個別のオンボーディングをご用意しています。想定件数をお知らせいただければ、お見積りします。
LIVESCRAPER10 をご利用ください。これらは同じパイプライン上で動くため、エクスポートは加工なしで 1 つの表に重ねられます。
同じ 15 列、同じくプロキシ不要の構成を Quill に向けたものです。service が各行に刻まれるので、2 つの小売業者が 1 つの表を共有しても区別がつきます。
同じ共有パイプライン上の別の小売業者で、同じく限界を正直に書いてあります。同一商品について小売業者ごとに何を実際に公開しているかを比べるとき、第 2 の情報源として役立ちます。
はるかに深いスキーマを持つ別のパイプラインです。旧価格、配送、ランキング、そして長く続く仕様項目群。15 列では足りない比較をしたいときに使ってください。
短い答えは「はい」です。商品ページが自身について公開しているものだけを収集する限りにおいて、であり、このサービスが読むのはそれだけです。
商品の掲載情報は公開されています。誰でもアカウントなしで開いて商品名、価格、在庫状況を読めますし、公開されている商業情報を収集することは以前から確立された慣行です。このサービスが読むものはさらに狭く、検索エンジンや価格比較サイトが機械的に読み取れるように小売業者がページへ埋め込んでいる JSON-LD だけです。それは利用されることを前提に公開された構造化データです。
これは私たちが提供する中で最もすっきりしたエクスポートでもあります。この 15 列のどれも個人データではないからです。価格、バーコード、商品コードは人ではなく商品を表すので、レビューやプロフィールで生じるデータ保護上の論点はここでは発生しません。価格は企業自身の商業情報です。競合の価格も、自社のそれをどう扱ってほしいかと同じように扱ってください。そして、取得した価格はある時点の価格であって、恒久的な事実ではありません。
Boots の規約は自動アクセスを制限しているので、これは利用規約の問題として残ります。私たちはログインの内側にあるものには一切触れず、通常の訪問者のブラウザに配信されるものだけを読み、データ層でサードパーティのトラッカーを動かすこともなく、エクスポートは 30 日後に自動削除されます。
最もよくいただく質問です。ほかにもあれば お問い合わせください。回答を書いているのは人であって、ボットではありません。
小売の調査は、たいてい 1 商品ではなく 1 つの棚から始まります。カテゴリ全体で何が取り扱われ、いくらで、どんな名前が付き、どう識別されているかを知りたいのに、手作業でクリックして回る部分には誰も時間を割けません。このサービスは代わりにリンクを受け取ります。Boots の商品 URL、またはカテゴリ URL 全体を 1 行に 1 件貼り付ければ、商品ごとに 1 行が返ります。商品名、価格、その価格が示されている通貨、在庫状況、ブランド、エクスポートを突き合わせ可能にする 3 つの識別子、画像、リンク、説明。15 列、1 商品につき 1 行です。
フォームには入力欄が 1 つと設定が 1 つだけあります。ほかに決めることがないからです。その設定はクエリごとの上限で、「ごと」という語が実際に効いています。カテゴリ URL を 5 件、上限 200 で実行すると、それぞれから 200 商品ずつ返り、合計 200 ではありません。すべて取得するには 0 に設定します。プロキシの入力欄はありませんが、これは抜けているのではありません。Boots はデータセンターからの通信をブロックする、あるいは商品をクライアント側でレンダリングするとしてプラットフォームが挙げている 4 社に含まれていないので、リクエストは共有プールを通り、借りるものも設定するものもありません。
このエクスポートが後段で役立つ理由は、識別子がそれぞれ独立した列になっていることです。商品名は 2 つの小売業者が 2 通りに書くラベルであり、それで結合するとはあいまいに結合するということです。sku、mpn、gtin は(小売業者が公開していれば)厳密です。まずそれらで結合し、残った分にだけ名前を使ってください。価格と通貨も同様に分けてあるので、後段の処理が計算前に文字列から記号を取り除く必要はなく、同じカテゴリの 2 回の実行は列ごとにそろいます。価格の動きを追う作業の土台はそこにあります。
1 つの限界ははっきり述べておく価値があります。期待すべきものが変わるからです。商品はページが自身について公開している JSON-LD(小売業者が検索エンジン向けに埋め込む構造化データ)から読み取られるため、列が埋まって届くのは Boots がその項目を公表している場合だけで、空欄は実行の失敗ではなく未公表を意味します。そして私たち自身は Boots に対して実行していません。この共有パイプラインから手元にある 45 件のエクスポートのうち 44 件は空で返り、データが入っていた唯一の 1 件は別の小売業者のもので、そこでは 15 列のうち 6 列がどの行でも空でした。それはツールについて何かを語りますが、Boots について信頼できることは何も語りません。だからこのページには例示値も書式も入力率も載せていません。無料枠で 1 カテゴリを実行し、ヘッダー行を読んでください。最初の 500 行は費用もクレジットカードも不要です。最新の料金は料金ページをご確認ください。