Il web scraping è una funzione di un programma che analizza costantemente dei siti per raccogliere e catalogare le informazioni contenute; l’esempio tipico è Google che analizza periodicamente quasi tutti i siti web e vi fornisce i risultati delle ricerche.
Scoprire informazioni utili per la programmazione della attività di marketing e analizzare automaticamente e costantemente i siti web dei concorrenti per decidere come reagire a loro comportamento è importantissimo.
A volte non è sempre necessario il web scraping perché i dati di interesse possono anche essere acquisiti da banche dati pubbliche e private con un costo notevolmente inferiore e una quantità maggiore di dati a disposizione; ovviamente il limite è che non sempre vi possono fornire tutti i dati necessari o non sono aggiornati.
La competenza di esperti del settore è fondamentale per provare quali sono le fonti di dati disponibili, valutare la loro utilità e come eventualmente integrarle con attività di ricerca personalizzata.
Purtroppo è facile sbagliare nella scelta e acquisizione dei dati per analizzare le attività di marketing, e spesso si ci accorge degli errori quando ormai il danno è stato fatto in e non è più possibile rimediare, con un costo notevolmente superiore a quello di una consulenza esterna.