Scraping dati siti dei comuni italiani

Buongiorno a tutti,

avrei bisogno, ai fini di creare una banca dati, di realizzare o, se già sviluppato, di utilizzare un web scraper per la ricerca, all’interno dei siti di tutti i comuni italiani, dei contatti dei responsabili della pianificazione urbanistica, che siano in assessorato o in uffici direttivi.

Avendo già disponibili tutti gli url dei comuni, l’idea è quella di sfruttare la standardizzazione nella struttura dei siti, di modo che, ricercando specifiche parole chiave, sia possibile ricavare informazioni come email dell’ufficio o direttamente della persona di contatto.

Qualcuno di voi ha avuto necessità di sviluppare una api con pressochè la stessa funzione?

Non avendo praticamente esperienza con questo tipo di ricerche, spero di non aver fatto una richiesta troppo vaga o lontana dalla realtà degli addetti al settore.

Ciao @DanieleUsai, non so se hai alla fine risolto,
ma potrebbe aiutarti questo freamwork RPA per fare quello che chiedi nei siti che gia possiedi, ovviamanete devi ingegnarti per riuscire a “trovare le informazione” (tramite regex o tag/classi standard, ecc…)

io lo usato per una azienda in passato che aveva bisogno di scaricarsi i codici da un catalogo online molto lungo,

spero ti possa essere d’aiuto,

saluti!