フィールドは2つ、それでフォームのすべてです - 欲しいボードと、それぞれから何件取るかです。
上限は1クエリごとです。5つのボードに上限200を設定すれば、それぞれから200件 - 合計200件ではありません。
完全なurlを送っても board は <ユーザー>/<ボード> に正規化されて返り、query は入力したものをそのまま保持します。前者はグループ化のキー、後者は入力リストとの突き合わせに使えます。
url はPinterest上のピン自身のアドレスで、すべての行にあります。link はそのピンがプラットフォーム外のどこを指すかで、多くのピンはどこも指さないため、しばしば空です。これらを別々の列に保つことが、使えるデータセットと当て推量との違いです。
description は空文字列になりません。説明のないピンでは半角スペース1つが返り、素朴な空判定をすべて通過します。こういうことは午前2時に気づくものなので、先にページに書いておきます。
このエクスポートについて、ページの他の何よりも重要な2点です。
まず落とし穴から。これは本当に厄介です。description 列は決して空になりません。説明のないピンでは半角スペース1つが返ります - 空文字列でもnullでもありません。思いつく空判定はすべて通過します:値はtruthyで、長さは1、表計算では空のセルに見えます。この列で絞り込み、重複排除、集計をするなら、まずtrimしてください。当社が保有するどの行にも、本当に空の説明はありませんでした。
次に正直な限界です。Pinterestはボードをページのhtmlではなくブラウザ側で描画しており、ツールもそう述べています:ボード全体を得るにはご自身のレジデンシャル経路が必要です。それがなくても実行はピンを返しますし - 当社の実行も返りました - ただし返ってきたものはボード全体ではなく部分的な眺めとして扱い、その上に件数を組み立てないでください。
根拠についてもう1つ。当社が保有する実行はいずれも同じボードに対するものです。ですからこのページはエクスポートの形と落とし穴を説明しますが、充足率も割合も載せません - それらは1つのボードについての事実であって、他の誰についてのものでもないからです。ご自身のボードで無料枠の小さな実行をおこなうのが、列がどう振る舞うかを知る正直な方法です。
名称は正確で、二重に確認されています - このサービス向けに公開されている列の一覧と、当社が保有するすべてのエクスポートのヘッダーです。注記をお読みください。このうち2つの列は、取り込み処理の足をすくう振る舞いをします。
<ユーザー>/<ボード> に正規化したもの - 完全なurlを送っても、短く突き合わせやすいキーが得られます。pinterest.com/pin/<id>/ の形です。当社が保有するすべての行に存在しました - これが信頼できるキーです。ここにあるものはすべて文字列で、repins も含まれます。JSONには10番目のフィールド position が加わり、これは本当の数値で実行内で1から始まりますが、CSVとXLSXは9列で止まります。2つの列が足をすくいます。description は空になりません - 説明のないピンは半角スペース1つを返すので、判定の前にtrimしてください。そして link は非常に多くの行で欠けますが、それは設計どおりです。これはピン自体ではなくプラットフォーム外の行き先だからです。常にあるのは url の列です。規則ではなく観察として挙げておく価値のあるパターンが1つ:image、repins、author は、当社のほとんどの実行でちょうど1行だけ揃って空になり、その行のタイトルと説明はピンではなくボード自体の記載のように読めました - ですから、すべての行をピンとして扱う前に、実行の最終行をご確認ください。このページに充足率は一切ありません:当社が保有する実行はいずれも1つのボードに対するもので、そこから出した割合はそのボードを説明するだけだからです。
フィールドは2つ。並べ替えも絞り込みもありません - ボードを挙げ、どこまで取るかを指定するだけです。
ボードが画像の壁ではなく表になったとき、それが何に変わるのか。
タイトル、説明、保存数が横並びになると、ボードは実際に見直せるものになります - どのピンが保存されたか、どれが説明なしで出ていったか、link が空でどこにも行き着かないのはどれか。
注視しているボードを取得し、タイトルや説明の書き方、どこへリンクしているかを比べます。20件のピンを表で読むのは、20枚の画像をスクロールするのとは別の作業です。
同じボードを定期的に実行すれば、比較できるファイルが2つ手に入ります。新しいピン、削除されたピン、動いた保存数は差分になります - そして url はすべての行にあるので、差分を取る安定したキーになります。
サブスクリプションも、最低利用額も、毎月の請求もありません。最初の500行は当社負担です。以降は従量課金で、ここにある他のスクレイパーと同じ一律料金です。
新規アカウントごとに1回限り。クレジットカードは不要です。クエリごとの上限、ファイルアップロード、すべてのエクスポート形式が含まれます - ご自身のボードで列がどう振る舞うかを見るには十分です。
プラットフォーム上の他のどのスクレイパーとも同じ均一料金です。実行が始まる前に、見積もりツールが行数とクレジット費用を表示します - 一見の価値があります。上限はクエリごとで、ボードの一覧は掛け算になるからです。
量に応じた価格、専用ワーカー、複数のボードを定期的に追跡するためのSLA。ご希望の規模をお知らせいただければお見積りします。
LIVESCRAPER10 をご利用ください。ボードは何が投稿されたかを教えます。この3つは、そこから先を担います。
X上での同種の仕事です:ハンドルを入れると、アカウントの行が出てきます。このページと同様、埋まっているのを見たことがない列について正直に書いてあります - 項目を前提に設計する前に、そちらの辞書をお読みください。
数値の付いたプロフィールです - フォロワー、フォロー中、これまでに出したもの。ボードに投稿しているアカウントのほうが本題なら、こちらが人物についてのより完全な記録です。
この固定の9列が持たない属性が必要なときは、こちらがページ自体を読み、指定した項目を返します。遅く、予測しにくくはありますが、固定スキーマに縛られません。
短い答え:公開ボードは公開されています - ただしピンは誰かの創作物であり、エクスポートはそれを投稿したアカウントを記載します。
ここで収集されるものはすべて、ログインの有無にかかわらず公開ボードで誰にでも表示されています。ログインは使わず、ペイウォールも越えず、アカウントにも触れません。実行はご自身のアドレスではなく当社のプロキシプールを通ります。推測は一切ありません:行に値があるなら、ボードがそれを表示していたということです。
これを商品カタログより重くしているものが2つあります。author 列はアカウントを記載するので、エクスポートは個人を特定しうるということです - したがって次に何をするかにGDPRおよび同等の規制が適用されます:適法な根拠、その人が合理的に予期する目的、そしてその目的に必要な期間を超えて保持しないこと。そしてピンそのもの - 画像、タイトル、説明 - は他者の創作物です。分析のために収集することと、再公開することは別の問題であり、後者を規律するのはデータ保護ではなく著作権です。
Pinterest自身の規約は自動的なアクセスを制限しています。ボードが公開されていることに頼るのではなく、規模を広げる前にお読みください。当社はデータ層でサードパーティのトラッカーを一切使用せず、エクスポートは30日後に自動削除されます。
最もよくいただく質問です。他にご不明な点は? お問い合わせください - 回答を書くのはボットではなく人間です。
Pinterestボードスクレイパーは、ボードを行データに変えます。pinterest.com/<ユーザー>/<ボード> の形でボードのurlを - 1行に1件ずつ、あるいはCSV、XLSX、TXT、Parquetのファイルとしてアップロードして - 送信し、1クエリあたりの上限を設定すると、各ピンが、依頼したボード、ピンのタイトルと説明、外部リンク、画像、ピン自身のアドレス、保存数、投稿したアカウントを持つレコードとして返ります。9列、1ピン1行で、CSV、Excel、JSONとしてダウンロードできます。board 列は、完全なurlを送っても <ユーザー>/<ボード> に正規化されて届くため、グループ化に使える短いキーになります。
このエクスポートには、知らないと取り込み処理を壊す細部が1つあります。description 列は決して空文字列になりません。説明のないピンでは半角スペース1つが返ります - truthyで、1文字の長さで、表計算では空のセルとして表示されるため、思いつく空判定はすべてこれを通してしまいます。絞り込み、重複排除、集計の前にtrimしてください。2つ目の、より穏やかな驚き:link は非常に多くの行で欠けます。これはピン自体ではなくプラットフォーム外の行き先であり、多くのピンはどこにもリンクしないからです。常にあるのは url 列、すなわちピン自身の pinterest.com/pin/<id>/ アドレスで、突き合わせや差分の信頼できるキーになります。repins が数値ではなく数字の文字列であること、そしてエクスポートの値は、JSONだけが持ち表計算は持たない position を除いてすべて文字列であることにもご注意ください。
はっきり述べておくべき限界が2つあります。Pinterestはボードをページのhtmlではなくブラウザ側で描画しており、ツールはボード全体を得るにはご自身のレジデンシャル経路が必要だと述べています。それがなくても実行はピンを返しますが、返ってきたものはボード全体ではなく部分的な眺めとして扱ってください。そして当社が保有する実行はいずれも単一のボードに対するものなので、このページは充足率も割合も載せません - それらはそのボードを説明するだけで、他のどのボードのことでもないからです。代わりにエクスポートの形と落とし穴を説明しており、残りはご自身のボードでの無料枠の小さな実行が正直に教えてくれます。
法的な面では、これは商品カタログより重く、検討すべき理由が2つあります。author 列はアカウントを記載するため、エクスポートは個人を特定しうるものであり、次に何をするかにGDPRおよび同等の規制が適用されます。そしてピンそのもの - 画像、タイトル、説明 - は他者の創作物ですから、再公開はデータ保護ではなく著作権の問題です。収集されるものはすべて公開ボードで誰にでも表示されており、ログインもペイウォールも関わりませんが、Pinterest自身の規約は引き続き自動的なアクセスを制限しますので、規模を広げる前にお読みください。無料で始められます:最初の500行は費用がかからずクレジットカードも不要、以降は1行あたり0.002ドルの均一料金です。