重要な入力はこれ一つで、はっきり言っておく価値があります。ここで探すのは家ではありません。エージェントのZillowプロフィールを渡すと、その人が手がけた取引が返ってきます。
https://www.zillow.com/profile/agent-name/ - 1行に1件、またはCSV、XLSX、TXT、Parquetファイルをアップロードします。1取引につき1行、由来のプロフィールURLが付きます。ページは当社のプロキシプール経由で取得され、あなたの実IPは使いません - ただしここではプールだけでは足りず、その理由は下のセクションで説明します。
プロフィールページは取引をスクロールするカードとして見せます。行になれば同じ情報を合計し、並べ替え、絞り込めます - 価格で、日付で、物件種別で、代理した側で。プロフィールを読むことと、プロフィールを測ることの違いです。
各取引は価格と並んで住所、寝室数、浴室数、面積、物件種別を持つので、ワンルームと5寝室の家を表示価格だけで比べることにはなりません。掲載URLも付いてくるので、元の情報に戻る必要が出たときにも困りません。
プロフィールURLの列を貼り付けるか、すでに管理しているファイルをアップロードすれば、実行がすべてを処理します。各行には由来のプロフィールが付くので、1つのファイルが会社全体や市場全体を含んでいても、エージェント単位できれいに分けられます。
このスクレイパーについて最初に知っておくべきことなので、ページの下のほうに埋もれさせていません。
ZillowはPerimeterXの背後にあります。 レジデンシャルプロキシなしの実行はエラーにならず、警告も出さず、止まりもしません - 正常に終了し、13列のヘッダー行だけで中身のないファイルを手渡します。これはクラッシュよりずっと厄介な失敗です。空のファイルは、取引が1件も掲載されていないエージェントとまったく同じに見えるからです。活発だと知っているプロフィールが空で返ってきたら、ほかの何よりも先にプロキシを確認してください。
これは免責文句としてではなく、ある程度の確信をもって言えます。当社がこのサービスについて保有する実行エクスポートはすべて空です。当社の他の2つのZillowプロフィールサービス、すなわちエージェントとレビューのサービスについても同様で、数か月にわたる実行を通じてそうです。どれも正しいヘッダー行とゼロ件のデータ行を持っています。レジデンシャル経路がない場合に何が起きるかについての、一貫した裏づけのある像です。だからこの要件は脚注ではなく冒頭に書いてあります。
このページにとっての帰結はこうです。列名は確かで、セルの中身はそうではありません。 下の13の名前とその順序は二重に確認済みです - 5つの別々の実行のXLSXヘッダー行と、公開されている列の配列が、正確に一致します。やらないのは、値がどう見えるかをお伝えすることです。一つも見ていないからです。下の説明が形式や尺度や語彙を必要としたところでは、推測せずにそう書いてあります。
エクスポートのヘッダー行を、その順序で。説明は各項目が何のためのものかを述べます。形式・尺度・語彙については意図的に何も主張しません - 上の注意書きをご覧ください。
status とは別の列であることはヘッダー行から分かります。ただしその語彙は見ていないので、固定の値の集合を前提に実装しないでください。transaction_type とは別のもので、同じく埋まっているのを見たことのない語彙です。名前は確かで、中身はまだです。 上の13列とその順序は、2つの独立した情報源 - 5つの別々の実行エクスポートのXLSXヘッダー行と、公開されている列の配列 - によって裏づけられているので、これらの名前を軸にスキーマを組んで差し支えありません。このページがお伝えしないのは、セルに何が入るかです。当社が保有するエクスポートはどれも、下に行のないヘッダーだからです。頼りにできる構造上の点が一つあります:transaction_type と status は別々の2列であり、語彙がどうであれ同じものの2つの名前ではありません。そしてZillowはPerimeterXの背後にありますので、実運用の実行にはレジデンシャルプロキシが要ります。それがエクスポートが空である理由であって、列の集合に疑いがあるからではありません。
1行に1つのURL、しかもプロフィールページである必要があります。物件ページのURLや検索結果は別種のページで、この実行が読むものではありません。
スクロールするページではなく表になったとき、実績に何ができるのか、いくつか例を。
候補のプロフィールURLをまとめて実行し、取引を横並びにします - 価格帯、物件種別、普段どちら側に立っているか。プロフィールページが見せることを選んだ要約の数字よりも、選定や採用の判断材料としてはるかに優れています。
ある市場で活動しているエージェントを入れれば、まとめたファイルがその市場の形を見せます - 何が、いくらで、どんな物件で動いているか。各行がプロフィールURLを保持するので、全体を見ても誰が何をしたかを見失いません。
本人の説明とプロフィールが、いつも同じ話をしているとは限りません。取引を行データとして取り出せば、見出しの数字を信じる代わりに自分で合計できます - そして各行の掲載URLは、個別に確認したくなったときのためにあります。
サブスクリプションも、最低利用額も、毎月の請求もありません。最初の500行は当社負担です。以降は従量課金で、ここにある他のスクレイパーと同じ一律料金です。
すべての新規アカウントに初回限定で。クレジットカード不要。クエリ単位の上限、ファイルアップロード、すべてのエクスポート形式を含みます。このスクレイパーに必要なレジデンシャルプロキシは、無料枠でもその後でも、お客様側でご用意いただきます。
プラットフォーム上の他のすべてのスクレイパーと同じ均一料金です。事前見積もりが、実行前に行数とクレジット費用を表示します - 想定外の請求も、換算が必要な計算ユニットもありません。
多数のエージェントプロフィールを定期的に処理する場合は、ボリューム価格、専用ワーカー、SLAをご用意します。規模をお知らせいただければお見積もりします。
LIVESCRAPER10 をご利用ください。取引と物件についての13列、そして誰かに連絡する手段はゼロ。この3つがその周辺を埋めます。
エージェントの履歴ではなく物件情報、そして全米ではなくニューヨーク。いま市場に何があるかが問いならそちらへ、誰が取引してきたかが問いならこちらへ。
この13列のどこにも連絡先の列はありません。このエクスポートからエージェントの名前を得て、その所属会社のドメインが分かっているなら、あちらのツールがその2つを勤務先アドレスに変える別のステップになります - どれくらい確かかを示すステータス付きで。
ドイツ市場での同じ種類の問い。知っておくとよいのは、このページと同じ正直な限界を共有していることです - 列名は文書化されており、当社が保有するエクスポートは、同じ種類の理由で空です。
簡潔に言えば、取引は公開プロフィールに掲載されていますが、ここで実際に効いてくるのはZillow自身の利用規約です - そしてそれは、ページが公開であることから想像されるより厳しいものです。
この13列にあるものはすべて、ログインの有無にかかわらず、どの訪問者にも公開のZillowエージェントプロフィール上で表示されています。ログインは使わず、ペイウォールも越えず、アカウントにも触れません。取得はあなた自身のIPではなく当社のプロキシプール経由です。米国では不動産取引の記録は大半の州で公的記録でもあるため、その背後にある事実は秘密ではありません。
ただし、それは許可と同じではありません。 Zillowの利用規約はサイトへの自動アクセスを制限しており、PerimeterXがあるのは本気だからです。「ページは公開だ」はデータについての議論であって、サイトを使うことで受け入れる契約についての議論ではありません - 規模を広げる前に、その規約を読み、あなたの用途がそれと整合するかを判断してください。この文がいちばん重要な種類のページであり、小さな文字ではなくここに置くことを選びました。
個人データについて。このエクスポートが扱うのは職業人と物件です。エージェントは業務上の立場で行動する氏名の分かる個人であり、ほかの列は取引と建物を記述するので、消費者のデータセットよりずっと軽い性質です。取り繕わない留保が一つ - represented は、中身を一度も見たことのない唯一の列です。名前は取引のどちら側かを指していますが、実際の実行がそこに人の名前を入れるなら、それは個人データであり、そこから生じるGDPRまたは英国GDPR上の義務は管理者であるあなたのものです。最初の実行でこの列を確認してください。当社はデータ層でサードパーティのトラッカーを動かしておらず、エクスポートは30日後に自動削除されます。
最もよくいただく質問です。他にご不明な点は? お問い合わせください - 回答を書くのはボットではなく人間です。
Zillowのエージェントプロフィールには、その人が関わった取引がスクロールするカードとして並んでいます。Zillow取引スクレイパーはそれを行データに変えます。入力は zillow.com/profile/ のURL - 物件でも検索でもなく、人です - を1行に1件貼り付けるか、CSV、XLSX、TXT、Parquetファイルとしてアップロードします。プロフィール上の各取引が、住所、価格、取引の種別とステータス、日付、寝室数、浴室数、面積、物件種別、エージェントが代理した側、掲載ページへのリンクを持つレコードとして返ります。13列、1取引につき1行、それぞれに由来のプロフィールURLが付くので、会社全体を含むファイルでもエージェント単位できれいに分けられます。
実行を計画する前に言っておくべきことが一つあります。ZillowはPerimeterXの背後にあり、レジデンシャルプロキシなしの実行は何も返しません。 さらに厄介なことに、それを教えてくれません。ジョブは正常に終了し、13列のヘッダー行をデータなしで手渡します。それは取引が掲載されていないエージェントとまったく同じに見えます。当社がこのサービスについて保有するエクスポートはすべてその状態で、当社の他の2つのZillowプロフィールサービスについても同様です。いずれも数か月にわたる実行を通じてそうでした。だからこの要件は脚注ではなくページの冒頭にあります。
そのことは、このページが主張する内容に正直な帰結をもたらします。列名は確認済みで、セルの中身は未確認です。 13の名前とその順序は2つの独立した情報源 - 5つの別々の実行のXLSXヘッダー行と、公開されている列の配列 - によって裏づけられているので、それを軸にスキーマを組んで差し支えありません。しかし price や date がどの形式で来るのか、transaction_type、status、property_type がどんな語彙を使うのか、beds、baths、sqft が数値なのか文字列なのかはお伝えしません。埋まっているものを一つも見ていないからです。ヘッダーだけから確認できるのは、transaction_type と status が1つのものの2つの名前ではなく別々の2列だ、ということです。
法的な点について。取引は公開のプロフィールに掲載されており、米国の大半の州では不動産取引の記録は公的記録です - ただしZillowの利用規約は自動アクセスを制限しており、効いてくるのはページが公開かどうかではなくそちらです。規模を広げる前にお読みください。また、このエクスポートのどこにも連絡先の列はありません。伝えるのはエージェントが何を売ったかであって、どう連絡するかではありません。無料で始められます。最初の500行は費用もクレジットカードも不要で、その後は1行あたり一律0.002ドル - レジデンシャルプロキシは別費用で、お客様のご負担です。