CarrefourDailyTracker

En el presente proyecto, hemos creado un web crawler capaz de navegar por la web del supermercado Carrefour, extrayendo los datos de los diferentes productos que allí se exponen y sus atributos principales (precios, ofertas y promociones). Este ejercicio tiene como finalidad entender y poner en práctica los conceptos aprendidos en la asignatura de Tipología y Ciclo de Vida de los Datos, asignatura perteneciente al Máster en Ciencia de los Datos de la Universitat Oberta de Catalunya, para realizar un Web Scraping.

El dataset CarrefourDailyPricing está formado por una lista con los productos del supermercado Carrefour, guardando los datos más importantes como: la categoría del producto, su precio actual, precio por kilogramo, ofertas y promociones.

El dataset CarrefourDailyPricing contiene los siguientes atributos:

•Categoría: Sección del supermercado a la que pertenece un producto.

•Descripción: Nombre que tiene asociado elproducto en el supermercado.

•Precio: Precio de venta actual.

•Precio Medida: Unidad de medida (Kg/L/ud/..)

•Precio Previo: anterior a la oferta.

•Precio Oferta: Precio de venta durante la oferta.

•Promociones: Promociones activas para cada producto.

•Enlace: Enlace donde se puede encontrar el producto en cuestión.

La araña está programada para actualizar el dataset una vez al día, a las 8:00hrs, generando un csv nuevocogiendo los atributos ya mencionados.

Este conjunto de datos busca recoger diariamente información de interés sobre cada producto en  el  supermercado Carrefour.  Durante la  elaboración  de  este  proyecto,  no  solo  buscamos  la extracción de datos, sino también poder llevar un registro donde comparar las subidas y bajadas de precios en un período de tiempo determinado. Por esa razón, hemos programado la araña para que recorra la web diariamente, y así poder remarcar los productos en oferta, cada cuánto tiempo  ocurren  y  su  evolución  en  el  tiempo.  También,  serviría  para  estudiar  el  impacto  que tienen sobre la economía las crisis como la que vivimos actualmente del covid.