Cole uma URL de busca do Craigslist - ou um anúncio avulso - e receba os resultados como linhas: o título, o preço pedido e a moeda, a condição quando o vendedor informou uma, o bairro, um link para o anúncio, a foto e uma prévia da descrição. Na ordem em que o Craigslist devolveu.
A entrada é a página que você rolaria de outro jeito. Monte a busca no Craigslist como sempre e depois passe o endereço para nós.
Uma linha por anúncio, marcada com a consulta de onde veio e numerada na ordem em que o Craigslist devolveu - assim o ranking sobrevive até a planilha.
O preço pedido e a moeda chegam como colunas próprias, então uma busca vira uma distribuição em vez de uma página para bater o olho. Leia antes a nota sobre o sentinela -1: é a única coisa que distorce uma média se passar batido.
O Craigslist marca os anúncios com a área informada por quem publica, não com um CEP, e é assim que ela chega. Uma única busca de cidade se espalha por uma longa cauda de bairros - o bastante para ver onde a oferta realmente está.
As linhas chegam numeradas na ordem em que o quadro serviu, então uma execução repetida mostra o que se mexeu. Essa ordem é justamente o que um copiar e colar manual sempre perde.
O que o quadro mostra de cada publicação: o que é, quanto custa, em que condição o vendedor diz que está, onde fica e onde ir ver.
Duas dessas colunas se comportam de um jeito que vale conhecer antes de construir em cima, então estão sinalizadas na tabela e não deixadas como tropeço. price é uma string e usa -1 para dizer que nenhum preço foi informado, de modo que uma conversão ingênua para número puxa todas as médias para baixo. E description é uma prévia limitada a 500 caracteres, não o anúncio inteiro; textos mais longos param no meio da palavra exatamente nesse comprimento.
O conjunto de colunas, o sentinela e o corte são propriedades da exportação e valem seja qual for a sua consulta. Com que frequência os campos opcionais trazem um valor é outra questão - isso varia com a categoria, o quadro para o qual você apontar e quantas linhas você levar.
A linha de cabeçalho da exportação, em ordem. Quando um campo aparece como opcional abaixo, isso descreve o que quem anuncia no Craigslist escolhe preencher - não a extração. Com que frequência ele traz um valor varia com o quadro, a categoria e o tamanho da execução.
Duas armadilhas, ambas fáceis de evitar depois que você sabe. price é uma string carregando o sentinela -1 para “sem preço informado”, então converter a coluna e tirar uma média vai puxá-la para baixo silenciosamente; filtre primeiro. E description é uma prévia de 500 caracteres, não o anúncio: textos mais longos param exatamente nesse comprimento, no meio da palavra. Além disso, position existe apenas no JSON, então uma exportação CSV ou XLSX tem nove colunas e não dez, e condition é realmente opcional no Craigslist, não algo que falte à extração - é um campo que o vendedor escolhe preencher.
Aponte para uma página de resultados para levar o quadro, ou para um anúncio específico quando já souber qual. Os dois voltam nas mesmas nove colunas.
Alguns exemplos do que um quadro de classificados consultável serve.
Extraia todos os anúncios daquilo que você negocia e leia a coluna de preço como uma distribuição, não como um feed. Filtre as linhas sem preço e a diferença entre uma boa e uma má compra deixa de ser palpite.
A coluna de bairro transforma uma busca de cidade em um mapa de oferta. Útil quando a diferença entre uma retirada que vale a pena e uma tarde perdida é de que lado da cidade fica.
Rode a mesma busca de forma programada e cada exportação é um retrato datado - quantos anúncios, a que preços, em que condição. Oferta e preços de usados se movem rápido, e uma execução isolada não mostra isso.
Sem assinatura, sem mínimo, sem fatura recorrente. Suas primeiras 500 linhas são por nossa conta - depois, pagamento por uso, à mesma tarifa fixa de qualquer outro extrator daqui.
Em toda conta nova, uma única vez. Sem cartão de crédito. Limites por consulta, upload de arquivo e todos os formatos de exportação inclusos.
Cerca de US$ 2 por 1.000 anúncios. O estimador prévio mostra a contagem de linhas e o custo em créditos antes de a execução começar - sem faturas surpresa, sem unidades de computação para traduzir.
Preço por volume, workers dedicados e um SLA para acompanhar muitas buscas em muitos quadros de forma programada. Conte seus números e enviamos uma proposta.
LIVESCRAPER10 no checkout.Preço de usado só significa alguma coisa ao lado de outro número. Estes dois fornecem esse número.
O outro grande marketplace de usados, no mesmo formato - título, preço pedido, cidade e um link permanente por item. Rode os dois sobre o mesmo termo e você tem o mercado local de revenda em dobro.
O preço de varejo do mesmo item novo. A diferença entre ele e um preço pedido no Craigslist é a base inteira de uma decisão de revenda.
Resposta curta: os anúncios são públicos - mas o Craigslist protege suas publicações mais do que a maioria dos sites, e vale saber disso antes de escalar.
Tudo o que é coletado aqui aparece em uma página pública do Craigslist para qualquer visitante, logado ou não: o título, o preço pedido, a condição escolhida pelo vendedor, a área sob a qual publicou, a foto e a descrição. Sem login, sem paywall, nada atrás de uma conta. Em toda a exportação não há nome de vendedor, telefone ou e-mail, nem coluna para isso.
Preferimos sinalizar a deixar você descobrir depois: o Craigslist historicamente agiu contra a coleta automatizada dos seus anúncios de forma mais ativa do que sites comparáveis, e seus termos a restringem. Isso não torna secretos dados públicos, mas faz disto uma questão de termos com histórico real por trás - se você planeja volume, ou construir um produto sobre a saída, busque orientação sobre o seu caso específico em vez de se apoiar em uma regra geral.
Não rodamos rastreadores de terceiros na camada de dados, e suas exportações se excluem sozinhas após 30 dias.
As perguntas que mais ouvimos. Mais alguma coisa? Fale conosco - quem escreve as respostas são humanos, não bots.
500 linhas grátis, uma única vez, em toda conta nova - sem validade. Depois são US$ 0,002 por linha, pagamento por uso - sem cartão registrado até você decidir.
O Extrator do Craigslist da Livescraper transforma uma busca de classificados em um conjunto de dados. Você envia uma URL de busca do Craigslist ou a de um anúncio avulso - digitada uma por linha, ou enviada como arquivo CSV, XLSX, TXT ou Parquet -, define um limite por consulta se quiser, e baixa os resultados como um arquivo CSV, Excel ou JSON limpo. Uma linha por anúncio, numerada na ordem em que o quadro devolveu.
Cada linha carrega o título do anúncio como o vendedor escreveu, o preço pedido e a moeda, a condição selecionada quando ele informou, o bairro sob o qual publicou, um link para a publicação, a foto e uma prévia da descrição. Nove colunas no arquivo, com uma décima no JSON carregando a posição do resultado.
Revendedores extraem todos os anúncios daquilo que negociam e leem os preços como uma distribuição em vez de um feed. Times de operações usam a coluna de bairro para transformar uma busca de cidade em um mapa de onde a oferta realmente está. Pesquisadores rodam a mesma busca de forma programada, porque preços de usados se movem rápido e um retrato isolado não mostra tendência.
Duas propriedades desta exportação valem ser conhecidas antes de escrever código contra ela. A coluna de preço é uma string e usa -1 para dizer que nenhum preço foi informado, então converter sem cuidado faz toda média que você calcular derivar para baixo - filtre essas linhas primeiro. E a descrição é uma prévia limitada a 500 caracteres, cortada no meio da palavra no limite, e não a publicação completa. Comece grátis: suas primeiras 500 linhas não custam nada e não pedem cartão, e depois são US$ 0,002 por linha, tarifa fixa.