Una de las áreas con más futuro en el campo de los web crawler y el big data es la recolección de datos financieros. La recuperación de las cotizaciones, los movimientos del mercado, las noticias vinculadas a los datos económicos son claves para el desarrollo de bots dedicados a la inversión y a la asistencia gubernamental en la toma de decisiones. En este sentido se viene testando la posibilidad de crear un marco de trabajo para el big data financiero. En esta línea se ha creado un experimento que demuestra las posibilidades del web scraping para datos financieros. En concreto se recopilan las cotizaciones de los mercados en tiempo real desde la fuente Google Finance [http://www.google.com/finance] . Esto permite hacer un seguimiento pormenorizado de los datos y proceder a su almacenamiento masivo, correlación con otras informaciones, datos o noticias.
▶ Prueba de recolección de datos de los mercados bursátiles