入力は商品番号ではなく出品ページです - 必要な製品を指定すると、ジョブが各ページの公開内容を読み取ります。
1製品につき1行で、各行には取得元のクエリが付きます - 長い一覧にまたがる実行でも、入力と突き合わせられます。
walmart.com の出品が常に Walmart 自身によって販売されているとは限りません。seller 列はバイボックスの背後にいる事業者を示すため、ページを開かなくてもマーケットプレイス出品と自社出品を見分けられます。それはたいてい、競合と転売業者を分ける違いです。
walmart.com/ip/625493716 でも、同じリンクの長いスラッグ形式でも受け付けます（1行に1件）。お手元の一覧にある形式がそのまま正しい入力で、各行には URL から読み取った item_id が入ります。つまり同じ製品を指す表記の異なる2つのリンクも、1つの列で結合できます。
availability は表示用の文章ではなく、機械可読な大文字トークンとして届きます。だからこそ、そのまま絞り込みやグループ化に使っても安全です。ただし数値は先に変換してください - 価格、評価、レビュー数はいずれもテキストで届きます。
各行は Walmart が公開しているままの1件の出品です。どう識別されるか、いくらか、どう評価されているか、在庫があるか、そして誰が売っているか。
下の列一覧は実際の実行エクスポートのヘッダー行であり、プラットフォームが公開している一覧でもあります。両者は完全に一致します。パーサーを書く前に、その下の注記をお読みください。数値が入ると思われる項目のいくつかはテキストで、逆に隣がテキストの中で1つだけ数値の項目があります。
エクスポートのヘッダー行を順序どおりに、プラットフォームが公開する列一覧と照合したものです。値の形が実際に観測されている項目についてはそれを記し、そうでない項目については何のための列かを述べるにとどめます。
currency にあります。これに対してコードを書く前に知っておくべきことが2つあります。1つ目、型は見た目どおりではありません。price、rating、review_count はいずれもテキストとして返り、position は数値として返ります。そのため価格列を素朴に合計すると、加算ではなく文字列連結になります。2つ目、結合には query ではなく item_id を使ってください。同じ製品を ID だけの URL でも長いスラッグ付き URL でも送信でき、query は送信されたほうを忠実に保持するからです。型の話を別にすれば、このページは各列が何のためのものかを述べており、何が入るかは述べていません。出品は入れるものだけを入れます。それを知る方法は、ご自身の URL で無料枠の実行を1回かけることです。
URL の一覧と上限です。フォームはこれだけで、並び順もプロキシの設定も選ぶ項目はありません。
マーケットプレイスの出品データを、チームが実際に抱えている問いに答えるためにどう使っているかの例をいくつか。
自社製品を取得し、販売事業者の列を読みます。聞いたこともない事業者が自社商品を出品している - それだけで発見のすべてです。しかもそれは、誰かが閲覧中に気づかなければならない何かではなく、表の中の値として届きます。
一覧を定期的に再実行し、2つのエクスポートを比較します。価格が動くのは1つのシグナル、在庫トークンが切り替わるのはもう1つのシグナルで、両方そろうと単独より多くが分かります。在庫切れの競合と、値引きしている競合は別の状況だからです。
商品 ID で結合し、自社カタログをマーケットプレイスが実際に表示している内容 - 公開されているタイトル、ブランド、カテゴリ - と突き合わせます。url 列があるので、おかしく見えるものはワンクリックで元のページで確認できます。
サブスクリプションも、最低利用額も、毎月の請求もありません。最初の500行は当社負担 - その後は従量課金で、ここにある他のスクレイパーと同じ均一料金です。
新規アカウントごとに初回のみ。クレジットカード不要。クエリごとの上限、ファイルアップロード、すべてのエクスポート形式を含みます。
1,000製品あたり約 $2。事前見積もりが実行開始前に行数とクレジット費用を表示します - 想定外の請求も、換算が必要な計算ユニットもありません。
継続的なモニタリングや非常に大規模なカタログ取得向けに、ボリューム料金、専用ワーカー、SLA をご用意します。ご希望の規模をお知らせいただければお見積もりします。
LIVESCRAPER10 をご利用ください。短い答え: 公開カタログについてははい - そしてこのエクスポートにアカウント情報、顧客情報、注文情報は含まれません。
ここで収集する項目は、買い物客やショッピングツールに読ませるために Walmart が自社の公開製品ページで公開しているものです。タイトル、価格、評価、在庫状況、販売事業者は、ログインの有無にかかわらずページを開いた誰にでも表示されます。公開されたカタログデータを収集することは長く定着した実務であり、ここではログインもカートも決済も一切扱いません。
この出力に個人データは一切ありません。製品テーブルです。販売事業者の列が示すのは個人ではなく事業者であり、顧客名も注文履歴も契約価格もありません。いずれも公開されていないからです。ログイン時にご自身のアカウントに見えているものは、ここが読むものではありません。
Walmart 自身の利用規約は自動アクセスを制限しているため、これは法律の問題であると同時に規約の問題でもあります - 同社と取引関係がある場合は、その内容をご確認ください。当社はデータ層でサードパーティのトラッカーを一切実行せず、エクスポートは30日後に自動削除されます。
最もよくいただく質問です。ほかにご不明な点は お問い合わせください - 回答を書いているのはボットではなく人間です。
Livescraper の Walmart 製品スクレイパーは、出品 URL の一覧を製品テーブルに変えます。walmart.com の製品 URL を1行に1件貼り付けるか - 説明的なスラッグの有無は問いません - CSV、XLSX、TXT、Parquet ファイルとしてアップロードし、必要ならクエリごとの行数に上限を設けて、結果を整った CSV、Excel、JSON ファイルとしてダウンロードします。
各行は1件の出品です。Walmart の商品 ID、タイトル、ブランド、価格とその通貨、評価とレビュー数、在庫状況、販売事業者、カテゴリ、説明、画像、製品リンク、そして実行内で何番目だったかの位置。商品 ID は URL から読み取られるため、形式の異なるリンクから組み立てた実行でも、引き続き1つの列で結合できます。
ブランドチームは自社製品を取得し、販売事業者の列を読んで誰が転売しているかを突き止めます。プライシングチームは一覧を定期的に再実行して2つのエクスポートを比較し、動いた価格と切り替わった在庫トークンがそれぞれ別の話を語ります。カタログチームは商品 ID で結合して商品マスタをマーケットプレイスの実表示と突き合わせ、url 列があるので疑わしいものは元のページで確認できます。
先に実務的な注意を1つ: 価格、評価、レビュー数はテキストで返り、位置は数値で返ります。合計や並べ替えの前に変換し、単位は推測せず通貨列から取ってください。無料で始められます - 最初の500行は費用もクレジットカードも不要で、その後は1行 $0.002 の均一料金です。