Cole URLs de produtos da Home Depot, uma por linha, e a seção de avaliações volta como uma tabela: quem escreveu, a nota, o título, o texto da avaliação e a data, ao lado da nota geral e do número de avaliações do produto. Dez colunas, uma linha por avaliação, ordenadas do jeito que você escolher.
Um campo obrigatório e dois controles. A ordenação é a que vale a pena pensar.
O limite é por consulta, não por execução: cinco produtos com um limite de cem são cem avaliações de cada um, não cem no total.
Photo Reviews restringe àquelas em que alguém de fato fotografou a coisa instalada. Para um produto que chega desmontado ou que é embutido numa parede, essas são as avaliações que mostram como ele fica numa casa de verdade, e não num estúdio.
A maioria das páginas de avaliação só deixa ir das mais novas para as mais antigas. Ter Oldest como ordenação é o que permite ler as reclamações do período de lançamento - as que revelam se um problema foi corrigido numa produção posterior ou se apenas ficou soterrado sob avaliações mais recentes.
aggregate_rating e review_count descrevem o produto e não a avaliação individual - é o que os nomes dizem, e é por isso que aparecem numa linha por avaliação. Mantidos ao lado de rating, são o que permite pesar uma avaliação contra a média em que ela está: duas estrelas entre quatrocentas cincos leem-se de forma bem diferente de duas entre nove. Se estão preenchidos em todas as linhas ou só onde a exportação decidir é o tipo de coisa a conferir na sua primeira execução; nunca vimos um preenchido.
Esses nomes estão confirmados duas vezes: são a lista declarada pelo próprio serviço, compartilhada com os outros scrapers de avaliações desta esteira, e são a linha de cabeçalho de toda exportação que temos. Para que serve cada coluna está abaixo. O que cada uma conterá, não - a nota explica por quê.
Os nomes são sólidos. Tudo além dos nomes é tarefa da sua primeira execução, e aqui essa ressalva pesa mais do que o normal. Temos três exportações deste serviço e nenhuma delas contém uma avaliação da Home Depot. Todas as colunas de avaliação - author, rating, title, review, date, aggregate_rating, review_count - estavam vazias nas três linhas; só query e status traziam alguma coisa. Duas das três tinham sido apontadas para um endereço de exemplo em vez da Home Depot e voltaram com http 404. A terceira foi apontada para um produto real da Home Depot e ainda assim não devolveu avaliação alguma. Então essas execuções mostram a forma da exportação e absolutamente nada sobre o conteúdo dela. O que elas confirmam é a lista de colunas: a linha de cabeçalho é idêntica nas três pastas e corresponde exatamente ao conjunto declarado do serviço. Todo o resto - como é uma nota, em que formato chega uma data, se aggregate_rating é número ou texto - está deliberadamente ausente em vez de adivinhado. O formulário também avisa que sites com antibot devolvem um status bloqueado no pool gratuito, que é somente residencial; esse é o aviso da própria plataforma sobre a esteira compartilhada e vale se planejar para ele. Rode o plano gratuito sobre um produto real e leia a linha de cabeçalho e os primeiros valores antes de construir em cima deles.
Todos começam por um link de produto que você copia do site.
Produtos de bricolagem falham de maneiras que um teste de laboratório não pega - um suporte que não alinha, um acabamento que marca, um manual que pula uma etapa. Ordene por Lowest rating e leia o texto: normalmente as mesmas três reclamações aparecem repetidas vezes.
A seção de avaliações de um produto concorrente é a descrição mais franca dele que você vai conseguir, e é pública. Aponte o scraper para o anúncio deles e você recebe as mesmas dez colunas que recebe para o seu, então os dois arquivos se comparam diretamente.
A ordenação Photo Reviews restringe às avaliações em que um comprador anexou uma imagem. Para investigar devoluções ou para uma conversa com um fornecedor, um punhado de reclamações fotografadas pesa mais do que mil notas em estrelas - e mantém pequena a contagem de linhas, e a conta.
Sem assinatura, sem mínimo, sem licença por usuário. Suas primeiras 500 linhas são por nossa conta - depois é pagamento conforme o uso.
Em cada conta nova, uma única vez. Sem cartão de crédito. Todos os scrapers liberados. Como nenhuma execução que temos devolveu uma avaliação de verdade, esta é a parte que mais importa aqui: gaste algumas linhas descobrindo o que essa exportação realmente contém antes de planejar em cima dela.
Cerca de US$ 2 por 1.000 avaliações, a mesma taxa fixa de qualquer outro scraper da plataforma. O limite é por consulta, então dez produtos com limite de cem são mil linhas - vale fazer a conta antes de começar, e é um bom motivo para estreitar antes a ordenação.
Preços por volume, SLAs, workers dedicados e onboarding sob medida para times que acompanham uma categoria em vez de um único produto. Diga seus números e nós orçamos.
LIVESCRAPER10 na finalização.As avaliações aparecem onde quer que o item seja vendido. Estes as devolvem no mesmo formato.
O mesmo item costuma ser vendido nos dois, e os dois públicos reclamam de coisas diferentes - avaria na entrega num, problema de instalação no outro. Rodar os dois separa os defeitos do produto dos do canal.
Outro grande varejista que carrega boa parte do mesmo catálogo. Um terceiro ponto de dados é o que transforma duas seções de avaliação contraditórias em um sinal de verdade.
O catálogo do concorrente mais próximo em vez das avaliações dele - preço, disponibilidade e identificadores. Útil para colocar uma avaliação ao lado do que o mesmo item custa do outro lado da rua.
Resposta curta: sim, quando você coleta apenas o que está publicamente visível numa página de produto - e é só isso que este serviço lê.
A seção de avaliações de um produto é pública. Qualquer pessoa pode abrir o anúncio sem conta e lê-la, e coletar informação publicamente visível para pesquisa de produto e de mercado é prática consolidada há muito tempo. Enquanto os dados estiverem disponíveis publicamente e o processo não atrapalhar o serviço, não há leis federais que proíbam isso.
As avaliações, porém, são escritas por pessoas, e author é um nome de exibição. Publicamente visível não é o mesmo que livre de obrigações: se você armazena, está tratando dados pessoais, e o GDPR e regimes semelhantes se aplicam a você independentemente de onde os obteve. Ler reclamações para consertar um produto é um caso fácil; montar um dossiê duradouro sobre quem avalia não é, e este serviço não é destinado a isso.
Os termos da Home Depot restringem o acesso automatizado, então isso continua sendo uma questão de termos. Não tocamos em nada atrás de um login, lemos só o que um visitante comum vê, não rodamos rastreadores de terceiros na camada de dados, e suas exportações se autoexcluem em 30 dias.
As perguntas que mais ouvimos. Mais alguma? Fale com a gente - quem escreve as respostas são pessoas, não bots.
Cole uma URL de produto, ordene por Photo Reviews e veja o que os compradores realmente publicaram. Suas primeiras 500 linhas são grátis.
Avaliações de uma ferramenta elétrica ou de um item de banheiro valem mais do que as da maioria das coisas, porque quem as escreve instalou o item e conviveu com ele. Elas também ficam presas dentro de um widget que só dá para rolar. Este serviço transforma a seção de avaliações de um produto em uma tabela: cole URLs de produtos da Home Depot, uma por linha, e cada avaliação volta como uma linha - quem escreveu, a nota, o título, o corpo do texto e a data, ao lado da nota geral e do total de avaliações do próprio produto. Dez colunas, uma linha por avaliação.
Dois controles moldam a execução, e a ordenação é o interessante. São seis opções - Photo Reviews, Most Helpful, Oldest, Newest, Highest rating e Lowest rating - e duas delas são raras o bastante para serem o motivo de usar isto. Photo Reviews restringe a compradores que fotografaram a coisa no lugar, o que é a única resposta honesta para saber como um acabamento ou uma instalação realmente fica. Oldest deixa você ler as reclamações do período de lançamento, que é como se distingue um problema corrigido de um soterrado. O limite é por consulta e não por execução, então dez produtos a cem cada um são mil linhas.
Manter em colunas separadas as notas do nível da avaliação e do nível do produto é o que torna a exportação analisável. rating é esta avaliação; aggregate_rating e review_count pertencem ao produto ao qual a avaliação se refere. Uma avaliação de duas estrelas entre quatrocentas de cinco é um fato diferente de duas entre nove, e só o segundo par de colunas diz qual dos dois você tem diante de si. Exatamente como esses dois são preenchidos ao longo das linhas de um produto vale uma olhada na sua primeira execução, já que nunca vimos uma exportação preenchida para descrever.
Uma limitação é dita sem rodeios porque muda o que esperar desta página. Temos três exportações deste serviço e nenhuma delas contém uma avaliação da Home Depot: todas as colunas de avaliação estavam vazias nas três. Duas tinham sido apontadas para um endereço de exemplo em vez da Home Depot e voltaram com http 404; a terceira foi apontada para um produto real da Home Depot e ainda assim não devolveu avaliação alguma. O que sobrevive é a lista de colunas, e sobrevive bem - a linha de cabeçalho é idêntica nas três pastas e corresponde ao conjunto declarado do serviço. Então os dez nomes acima são confiáveis, e tudo além deles - como é uma nota, em que formato chega uma data, se o agregado é número ou texto - está deliberadamente ausente em vez de inventado. O formulário também avisa que sites com antibot devolvem um status bloqueado no pool gratuito, que é somente residencial; esse é o aviso da própria plataforma sobre a esteira compartilhada e vale se planejar para ele. Rode um produto no plano gratuito e leia você mesmo as primeiras linhas; suas primeiras 500 não custam nada e não exigem cartão. Veja preços para as tarifas atuais.