始める前に知っておくとよいこと。これは当社のZillow取引スクレイパーと同じURLを受け取り、違うものを返します。あちらは取引1件につき1行。こちらはエージェント1人につき1行です。
https://www.zillow.com/profile/agent-name/ - 1行に1件、またはCSV、XLSX、TXT、Parquetファイルをアップロードします。1人につき1行、由来のプロフィールURLが付きます。ページは当社のプロキシプール経由で取得され、あなたの実IPは使いません - ただしここではプールだけでは足りず、その理由は次のセクションで説明します。
氏名、所属会社、電話番号、ウェブサイト、評価、レビュー件数、成約件数、価格帯、活動地域、ライセンス - プロフィールページがいくつもの区画に分けて見せているものが、1行14列で届きます。候補者の短いリストが、並べ替えられる表になります。
連絡先を一切持たない当社のZillow取引エクスポートと違い、こちらには phone、website、そしてプロフィールリンクがあります。測るだけでなく連絡を取りたいときに手を伸ばすべきZillowサービスは、こちらです。
プロフィールURLの列を貼り付けるか、すでに管理しているファイルをアップロードすれば、実行がすべてを処理します。各行に由来のプロフィールURLが付くので、会社全体を含むファイルでも、一人ひとりまできれいに辿れます。
このスクレイパーについて最初に知っておくべきことなので、ページの下のほうに埋もれさせていません。
Zillowはデータセンター由来のIPをブロックしており、その仕組みがPerimeterXです。 レジデンシャルプロキシなしの実行はエラーにならず、警告も出さず、止まりもしません - 正常に終了し、14列のヘッダー行だけで中身のないファイルを手渡します。これはクラッシュより厄介な失敗です。空のファイルは、解決しないプロフィールURLとまったく同じに見えるからです。存在すると分かっているプロフィールが空で返ってきたら、URLを確認する前にプロキシを確認してください。
これは免責文句としてではなく、ある程度の確信をもって言えます。当社がこのサービスについて保有する実行エクスポートはすべて空です。当社の他の2つのZillowプロフィールサービス、すなわち取引とレビューのサービスについても同様で、数か月にわたる実行を通じてそうです。どれも正しいヘッダー行とゼロ件のデータ行を持っています。レジデンシャル経路がない場合に何が起きるかについての、一貫した裏づけのある像です。だからこの要件は脚注ではなく冒頭に書いてあります。
このページにとっての帰結はこうです。列名は確かで、セルの中身はそうではありません。 下の14の名前とその順序は二重に確認済みです - 28の別々の実行の同一のXLSXヘッダー行と、このサービスについてプラットフォームが公開している列の配列が、正確に一致します。やらないのは、値がどう見えるかをお伝えすることです。一つも見ていないからです。下の説明が形式や尺度や語彙を必要としたところでは、推測せずにそう書いてあります。
エクスポートのヘッダー行を、その順序で。説明は各項目が何のためのものかを述べます。形式・尺度・語彙については意図的に何も主張しません - 上の注意書きをご覧ください。
name とは別の列なので、名簿を勤務先ごとにまとめるのにパース処理は要りません。max_rating はありません - ので、尺度をファイル自体から復元することはできません。他のプラットフォームと比べる前に、実際の実行で確認してください。rating が読めるものになる点にご留意を。name とは別の列であることはヘッダー行から分かります。ただしどちらも埋まっているのを見ていないので、実際にどう違うのかはお伝えできません。名前は確かで、中身はまだです。 上の14列とその順序は、2つの独立した情報源 - 28の別々の実行エクスポートの同一のXLSXヘッダー行と、このサービスについてプラットフォームが公開している列の配列 - によって裏づけられているので、これらの名前を軸にスキーマを組んで差し支えありません。このページがお伝えしないのは、セルに何が入るかです。当社が保有するエクスポートはどれも、下に行のないヘッダーだからです。構造上の欠落が一つあります：ここには max_rating の列がないので、評価の尺度はファイルから復元できず、実際の実行で確認する必要があります。そしてZillowはデータセンター由来のIPをブロックしますので、実運用の実行にはレジデンシャルプロキシが要ります。それがエクスポートが空である理由であって、列の集合に疑いがあるからではありません。
1行に1つのURL、しかもプロフィールページである必要があります。同じURLが当社のZillow取引スクレイパーでも使えます - 違うのは返ってくるもので、入れるものではありません。
1ページずつ開いていく代わりに表になったとき、名簿に何ができるのか、いくつか例を。
ある市場で活動しているエージェントを入れれば、氏名、所属会社、電話番号、ウェブサイトが列として返ります。連絡先が取引エクスポートではなくこちらにあるので、候補リストが一度の処理で実際に動かせるものになります。
business_name と sale_price_range がそれぞれ独立した列なので、プロフィールのファイルは、誰がどこに属し市場のどのあたりを扱っているかで並びます - プロフィールページを1つも読まずに。
同じプロフィールURLを当社のZillow取引スクレイパーに通し、プロフィールURLで結合してください。エージェント自身が示す要約の数字と、そのページに載っている取引が並びます - 1つのURLリストから、同じ人物についての2つの見方が得られます。
サブスクリプションも、最低利用額も、毎月の請求もありません。最初の500行は当社負担です。以降は従量課金で、ここにある他のスクレイパーと同じ一律料金です。
すべての新規アカウントに初回限定で。クレジットカード不要。クエリ単位の上限、ファイルアップロード、すべてのエクスポート形式を含みます。このスクレイパーに必要なレジデンシャルプロキシは、無料枠でもその後でも、お客様側でご用意いただきます。
プラットフォーム上の他のすべてのスクレイパーと同じ均一料金です。1人につき1行なので、ここでは1行が1人 - 見積もりが読みやすくなります。実行前に行数とクレジット費用を表示します。
大規模なエージェント名簿を定期的に処理する場合は、ボリューム価格、専用ワーカー、SLAをご用意します。規模をお知らせいただければお見積もりします。
LIVESCRAPER10 をご利用ください。これはエージェントを要約します。次の3つは、同じ入力から別のものを返すか、同じ領域を別の場所でカバーします。
同じプロフィールURLで、1人につき1行ではなく取引1件につき1行。要約の数字の裏にある取引が欲しいときはこちらへ - そしてプロフィールURLで両者を結合すれば、両方が手に入ります。
売る人ではなく物件情報、そして全米ではなくニューヨーク。市場に何があるかが問いならそちらへ、誰がその市場で動いているかが問いならこちらへ。
このエクスポートは電話番号とウェブサイトを持ちますが、メールアドレスはありません。name と website から取ったドメインを渡せば、あちらのツールが勤務先アドレスを返します - どれくらい確かかを示すステータス付きで。
簡潔に言えば、プロフィールは公開されていますが、ここで実際に効いてくるのはZillow自身の利用規約です - そしてこのエクスポートは、当社の他の多くよりも一人の人間について多くを含みます。
この14列にあるものはすべて、ログインの有無にかかわらず、どの訪問者にも公開のZillowエージェントプロフィール上で表示されています。ログインは使わず、ペイウォールも越えず、アカウントにも触れません。取得はあなた自身のIPではなく当社のプロキシプール経由です。エージェントがこれらの情報を公開しているのは、まさに顧客に見つけてもらい、連絡してもらうためです。
ただし、それは許可と同じではありません。 Zillowの利用規約はサイトへの自動アクセスを制限しており、データセンターIPのブロックがあるのは本気だからです。「ページは公開だ」はデータについての議論であって、サイトを使うことで受け入れる契約についての議論ではありません - 規模を広げる前に、その規約を読み、あなたの用途がそれと整合するかを判断してください。このページでは、それがいちばん重要な一文です。小さな文字ではなくここに置くことを選びました。
当社のZillow取引エクスポートよりも、こちらは慎重に扱ってください。 あちらは取引と建物を記述しますが、こちらは人を記述します - name、phone、photo、screen_name、そして職業上の license 番号。これらはエージェント自身が業務上の立場で公開することを選んだ情報であり、その分だけ軽い側に位置します。それでも識別可能な個人についての個人データであることに変わりはなく、ライセンス番号は識別子です。EUまたは英国にいる場合、これを実行することであなたが管理者になります。適法な根拠が必要で、データが本人から得られたものではない以上、それを保有していることとどこから来たのかを本人に伝えなければなりません。その後に何を送るかは、マーケティング規則が別途定めます。当社はデータ層でサードパーティのトラッカーを動かしておらず、エクスポートは30日後に自動削除されます。
最もよくいただく質問です。他にご不明な点は? お問い合わせください - 回答を書くのはボットではなく人間です。
Zillowのエージェントプロフィールは、知っていることをいくつもの区画に分けて見せます - その人が誰で、どの会社に属し、どう連絡すればよく、どう評価され、何を売ってきたか。Zillowエージェントスクレイパーはそのすべてを1行に載せます。入力は zillow.com/profile/ のURLで、1行に1件貼り付けるか、CSV、XLSX、TXT、Parquetファイルとしてアップロードします。各エージェントは、氏名と事業体名、電話番号とウェブサイト、評価とレビュー件数、成約件数と価格帯、活動地域、ライセンス番号、表示名、写真、正規のプロフィールURLを持つレコードとして返ります。14列、1人につき1行、それぞれに由来のURLが付きます。
当社のZillow取引スクレイパーとの違いをはっきりさせておく価値があります。両者は同じ入力を受け取るからです。こちらはエージェント1人につき1行 - プロフィールの要約。あちらは同じプロフィールに載っている取引1件につき1行。1つのURLリストを両方に通し、プロフィールURLで結合すれば、エージェント自身の見出しの数字と、その裏にある取引が隣り合います。連絡先があちらではなくこちらにある点にもご注意を。このエクスポートは電話番号とウェブサイトを持ち、取引エクスポートはどちらも持ちません。
実行を計画する前に言っておくべきことが一つあります。Zillowはデータセンター由来のIPをブロックしており、レジデンシャルプロキシなしの実行は何も返しません。 さらに厄介なことに、それを教えてくれません。ジョブは正常に終了し、14列のヘッダー行をデータなしで手渡します。それは解決しないプロフィールURLとまったく同じに見えます。当社がこのサービスについて保有するエクスポートはすべてその状態で、当社の他の2つのZillowプロフィールサービスについても同様です。いずれも数か月にわたる実行を通じてそうでした。だからこの要件は脚注ではなくページの冒頭にあります。
そのことは、このページが主張する内容に正直な帰結をもたらします。列名は確認済みで、セルの中身は未確認です。 14の名前とその順序は2つの独立した情報源 - 28の別々の実行の同一のヘッダー行と、公開されている列の配列 - によって裏づけられているので、それを軸にスキーマを組んで差し支えありません。しかし phone、license、sale_price_range がどの形式で来るのか、location が都市なのか地域なのか、screen_name が name とどう違うのかはお伝えしません。埋まっているものを一つも見ていないからです。ヘッダーだけから確認できるのは、max_rating の列がないということです。評価の尺度はファイルから復元できず、実際の実行で確認する必要があります。法的な面では、プロフィールは公開されていますが、Zillowの規約は自動アクセスを制限しており、このエクスポートは氏名の分かる人物の電話番号、写真、ライセンス番号を含みます - 個人データとして扱ってください。無料で始められます。最初の500行は費用もクレジットカードも不要で、その後は1行あたり一律0.002ドル、レジデンシャルプロキシは別費用です。