Descripción del Proyecto
Metodología del Análisis de Datos
Para realiza el análisis de los productos hortofrutícolas utilizados en el proyecto se ha utilizado el lenguaje de programación Python. Este cuenta con un amplio soporte en la actualidad y tiene ciertas bibliotecas para la manipulación y análisis de datos que nos han hecho decantarnos por él. Así, proporcionadas las bases de datos con información variada de los productos hortofrutícolas en periodos de pandemia y anteriores, utilizamos la biblioteca Pandas, una biblioteca de software escrita como extensión de NumPy para manipulación y análisis de datos. Además, nos valdremos de Jupyter Notebook para como herramienta donde podemos crear en tiempo real código y evaluarlo paso a paso.
![Foto Pantallazo Ordenador](static/images/otros/pantalla_res_min.jpg)
Así pues, con esta somos capaces de generar los siguientes scripts (los nombres son enlaces hacía los archivos donde se pueden consultar para más detalles, pues estos han sido debidamente comentados para facilitar su comprensión):
- get_volumen_penetracion.py Útil para obtener de forma sencilla y rápida la información de un producto en materia de volumen a nivel nacional y penetración de dicho producto en el hogar español durante el periodo de tiempo comprendido de 2018 a 2020, por meses. Con él se han generado las graficas para el análisis individual de diversos productos hortofrutícolas, así como sus gráficas.
- importaciones_exportaciones_producto.py Mediante este script, dado un producto que deseemos obtendremos los valores de importación y exportación de España para dicho producto en el periodo comprendido desde 2017 a 2020. Con él ha sido posible generar las gráficas y analizar de forma individual los productos hortofrutícolas presentes en este proyecto.
- importaciones_exportaciones_generales.py Con este script extraemos, de forma general, los valores obtenidos mensualmente para las frutas, hortalizas y productos hortofrutícolas en su conjunto en materia de importaciones y exportaciones realizadas por España en el periodo comprendido entre 2017 hasta 2020. Así, podemos analizar también de forma general el efecto de la COVID-19sobre este sector.
- mapas.ipynb En este Notebook utilizamos datos provistos por Eurostat y Our World in Data para analizar en términos mas generales el comportamiento del mercado español en términos de materia de importación y exportación. Así, somos capaces de generar mapas (página de Conclusiones) en los que mostramos las importaciones y exportaciones españolas, a la vez que mostramos el impacto de la COVID-19 en cada región.
- prevision.py Utilizando este script entrenaremos diferentes redes neuronales para realizar la previsión de los valores esperados en materia de importación y exportación en España durante la etapa de la COVID-19, expuesto en la sección de Previsión. Así, somos capaces de analizar el impacto de la crisis sanitaria en el mercado hortofrutícola español de forma ciertamente objetiva.
Fuentes Adicionales
Los datos proporcionados en el evento Cajamar UniversityHack 2021 para el reto que tratamos, Cajamar Agro Analysis, han sido de gran utilidad para construir ciertas partes de la aplicación de análisis planteado, pero aun así, como se nos aconsejaba, hemos utilizado fuentes de datos adicionales para poder analizar de una forma más completa los efectos de la crisis sanitaria en el mercado hortofrutícola español. Para ello hemos conseguido dos tipos de datos de gran valía: Datasets e Informes. Se puede acceder al archivohaciendo clic en su nombre.
- Dataset: Eurostat Fronteras Información geográfica sobre la delimitación de las fronteras de aquellos países con los que España ha mantenido flujo de importación y/o exportación. Esta información es de gran ayuda ya que nos permite dibujar en los mapas, junto al dataset 5 proporcionado en el reto con la información referente a los contagios y muertes producidos por el virus, presentar de forma visual cual ha sido el impacto en cada región de la COVID-19. Para ello, hemos descargado los datos accesibles desde esta página, utilizando los datos 'Countries 2020 - 1:20 Million', que nos proporciona información de las fronteras con una precisión de 20 metros, margen de error bajo que supone menos puntos en el mapa que cargar que otras versiones con mayor precisión.
- Dataset: Fepex Importaciones y Exportaciones Frutas y Verduras Detalle de producto y valor mensual de importaciones y exportaciones desde el año 2016 hasta el año 2020 de las frutas y verduras en España. Información detallada por producto. En cuanto a la información por país, está correctamente, en formato anual.
- Dataset: Eurostat Importaciones y Exportaciones Frutas y Verduras El problema con el dataset anterior era que no disponíamos de la información de importación y exportación mensual de cada país por categoría: Verduras y Frutas. Este dataset nos proporciona esta información desde enero de 2017. Dicho dataset es generado mediante la herramienta que nos proporciona Eurostat.
- Dataset: COVID-19 Para la elaboración de los mapas de importaciones y exportaciones relacionadas con España, presentes en el apartado de Comercio exterior, se ha querido añadir información referente al avance de la COVID-19 en cada región. Para ello, se nos proporcionaba un dataset con dicha información, pero este no contaba con los datos de diciembre de 2020. Así, se ha descargado dicha información del sitio Our World in Data, que cuenta con los datos actualizados gracias a la Universidad Johns Hopkins.
- Informe: Alimentación en España 2020 - MERCASA. Se ha utilizado el informe de Alimentación en España durante el año 2020 para extraer información y datos acerca de las diferentes verduras y frutas analizadas en esta página. Ha sido un material de gran ayuda.
- Informe: Ministerio de Agricultura, Pesca y Alimentación El Ministerio de Agricultura, Pesca y Alimentación (MAPA) es el departamento ministerial del Gobierno de España competente para la propuesta y ejecución de la política del Gobierno en materia de recursos agrícolas, ganaderos y pesqueros, de industria agroalimentaria, de desarrollo rural y de alimentación.
- Informe: Alimarket Empresa líder en generación de contenidos de información económico-sectorial en España. Obtención de datos de su página web alimarket.es referentes a importaciones y exportaciones y efectos del COVID.
- Informe: Huercasa Grupo de empresas en creciente expansión dedicadas a la elaboración de productos vegetales de quinta Gama.
- Informe: CaixaBank Research Informe del sector Agroalimentario: Resiliencia y crecimiento del sector durante la pandemia.
- Informe: Hortoinfo - Euroestacom Se han consultado varias noticias con información procedente del servicio estadístico Estacom.
- Informe: Fepex Federación Española de Asociaciones de Productores Exportadores de Frutas, Hortalizas, Flores y Plantas Vivas. Obtención de datos referentes a importaciones y exportaciones.
- Informe: Agroinformación Se han consultado información referente a diferentes productos hortofrutícolas.
- Informe: DiarioSUR Se han consultado información referente a la patata.
- Informe: Generalitat Valenciana (Dogv) Se han consultado información referente a las medidas tomadas en diferentes épocas del año.
- Noticias: Diario Cinco Dias Se han consultado noticias referentes a la crisis sanitaria de su sitio web.
Mejoras Futuras
Como propuestas de mejora existen, varias líneas de desarrollo que no han sido implementadas por falta de tiempo. Así, las principales serían:
Testimonios. Sería interesante visitar comercios locales y mercados que traten con productos hortofrutícolas y realizar un video en el que cuenten su experiencia y como han vivido ellos la crisis sanitaria.
Más productos. No han sido analizados todos los productos hortofrutícolas detalladamente, si no una selección de los mas comunes en el mercado español debido a al gran variedad de estos. En esta linea, podríamos completar con mas productos las secciones de Frutas y Verduras.