CarrefourDailyTracker

En el presente proyecto, hemos creado un web crawler capaz de navegar por la web del supermercado <em>Carrefour</em>, extrayendo los datos de los diferentes productos que allí se exponen y sus atributos principales (precios, ofertas y promociones). Este ejercicio tiene como finalidad entender y poner en práctica los conceptos aprendidos en la asignatura de Tipología y Ciclo de Vida de los Datos, asignatura perteneciente al Máster en Ciencia de los Datos de la Universitat Oberta de Catalunya, para realizar un Web Scraping. El dataset <em>CarrefourDailyPricing</em> está formado por una lista con los productos del supermercado <em>Carrefour</em>, guardando los datos más importantes como: la categoría del producto, su precio actual, precio por kilogramo, ofertas y promociones. El dataset <em>CarrefourDailyPricing</em> contiene los siguientes atributos: •<strong>Categoría</strong>: Sección del supermercado a la que pertenece un producto. •<strong>Descripción</strong>: Nombre que tiene asociado elproducto en el supermercado. •<strong>Precio</strong>: Precio de venta actual. •<strong>Precio Medida</strong>: Unidad de medida (Kg/L/ud/..) •<strong>Precio Previo:</strong> anterior a la oferta. •<strong>Precio Oferta:</strong> Precio de venta durante la oferta. •<strong>Promociones:</strong> Promociones activas para cada producto. •<strong>Enlace:</strong> Enlace donde se puede encontrar el producto en cuestión. La araña está programada para actualizar el dataset una vez al día, a las 8:00hrs, generando un csv nuevocogiendo los atributos ya mencionados. Este conjunto de datos busca recoger diariamente información de interés sobre cada producto en el supermercado <em>Carrefour</em>. Durante la elaboración de este proyecto, no solo buscamos la extracción de datos, sino también poder llevar un registro donde comparar las subidas y bajadas de precios en un período de tiempo determinado. Por esa razón, hemos programado la araña para que recorra la web diariamente, y así poder remarcar los productos en oferta, cada cuánto tiempo ocurren y su evolución en el tiempo. También, serviría para estudiar el impacto que tienen sobre la economía las crisis como la que vivimos actualmente del covid.