Coletor de Preço na WEB

Bom dia,

Estou procurando algum informação para montar uma rotina de busca de preço na WEB.

Ex.

Ao digitar “OLEO VEGETAL DE 500ml” o sistema geraria uma consulta com a possibilidade de grava no banco de dados, para eu selecionar o maior, menor e a média do preço. Essa pesquisa deverá busca somente em uma determina região, não pode ser Global. retornado preço, nome do vendedor, telefone e endereço.

Onde posso conseguir algum material para iniciar os estudos.

Grato

SQL é ótimo negócio nesse caso.

Sim, pretendo utilizar o SC com postgreSQL.

Tu quer buscar em toda a WEB esse produto?
ou tu quer buscar no seu BANCO DE DADOS o produto?
si for a primeira opção limito meus comentarios por aqui mesmo

Se for garimpar na web e se for usar PHP , inicie por CURL

Pois é, È a primeira opção.
Quero busca na WEB, ainda limitando a uma região.

Ok, vou já uma direção. vlw

Isso que você quer fazer se chama Web Scraping ‘Raspagem’.
https://www.octoparse.com/Product

Vídeo como funciona:
https://www.youtube.com/watch?v=LJRPLyXO3PM&t=96s

Seria interessante pegar um programa/site feito para isso, depois você recarrega as informações no banco de dados,
para seu cliente analisar com o aplicativo/site do scriptcase.

Existem sites que tem JAVASCRIPT/Ajax avançado, ai usando curl em PHP você não conseguiria fazer os ‘desvios’
para pegar os dados e essas ferramentas já fazem isso, além usarem proxy e ficarem mudando de IP, para
isso porque existem sites hospedagens/firewall que se notarem um trafego muito intenso de um IP fixo, eles bloqueiam o
acesso.

Ai nesse tipo de produto você cadastra uns 3 hipermercados, que você conhece que ficam naquela região,
ai na construção do scrap você já adiciona um campo com o nome da região/cidade, etc que vai ser
importado junto com o produto e preço depois para o banco de dados da sua aplicação, com isso você teria
a pesquisa correta no scriptcase.

Maravilha. Muito agradecido pelo ótimo conteúdo.