Artigo – XXXVIII Congresso Pan-Americano UPAV – CHILE 2024

Web Scraping, ChatGPT e Machine Learning: Ferramentas práticas no uso da coleta e processamento de dados para avaliação de imóveis

A avaliação imobiliária é um processo complexo que exige a análise detalhada de diversas variáveis para determinar, com precisão, o valor de um imóvel. Nesse contexto, este estudo investiga a aplicação de Web Scraping na coleta de dados de portais imobiliários. Além disso, analisa a integração desses dados em modelos de machine learning para aprimorar a precisão das avaliações. Utilizando a plataforma Octoparse, foi possível coletar uma amostra de 1052 imóveis. Em seguida, os dados foram tratados e analisados com o auxílio de inteligência artificial generativa (ChatGPT). Esse recurso facilitou a execução de rotinas, processamento de dados e geração automatizada de relatórios.

Inicialmente, foram aplicadas técnicas de regressão linear simples e múltipla para compreender a relação entre variáveis independentes e o valor dos imóveis. Posteriormente, avançou-se para modelos mais sofisticados de machine learning, como a Random Forest. Esse método demonstrou alta eficácia na captura de interações complexas entre variáveis. Além disso, contribuiu para a melhoria da precisão das previsões. A análise estatística revelou que variáveis como área, número de dormitórios, banheiros, vagas de estacionamento, comodidades e bairro são determinantes essenciais para a valoração dos imóveis.

A verificação de heterocedasticidade e multicolinearidade, bem como a identificação de outliers, foi fundamental para garantir a robustez dos modelos. A utilização da Random Forest permitiu uma explicação mais detalhada da variação dos preços. Assim, os resultados evidenciam o potencial do Web Scraping aliado à inteligência artificial e ao machine learning na avaliação imobiliária. Esse conjunto de tecnologias torna o processo mais eficiente, preciso e alinhado às exigências do mercado atual.

Por outro lado, ainda existem desafios, como a qualidade dos dados e a manutenção dos algoritmos. No entanto, as oportunidades são vastas. Essas tecnologias possibilitam avaliações mais precisas, rápidas e economicamente viáveis. Dessa maneira, a adoção dessas metodologias tende a transformar a prática da avaliação imobiliária, tornando-a mais robusta e adequada às demandas do mercado contemporâneo.

Você pode conferir a íntegra do artigo abaixo: