Auto-escalado de microservicios cloud

ste proyecto ha estudiado el rendimiento de los procesos asociados a un producto de Ernst & Young, Doc Intel SIRE. SIRE es una solución de inteligencia documental que se ofrece de forma SaaS (Software as a Service), por lo que EY debe asumir los costes de mantenimiento de la solución. SIRE está diseñada usando una arquitectura de microservicios alojada en un clúster de Azure Kubernetes. El objetivo del proyecto es estudiar un histórico de datos de ejecución de SIRE para desarrollar herramientas que permitan estimar la cantidad de recursos óptimos que otorgar a cada uno de los microservicios para minimizar los tiempos de ejecución. Durante el proyecto se ha realizado una exploración de los datos disponibles, desarrollando en el proceso diversas herramientas de limpiado, transformación y visualización de datos que permitirán acelerar análisis futuros. Teniendo en cuenta las conclusiones que se obtuvieron durante la fase de exploración se desarrollo un simulador capaz de estimar el rendimiento de SIRE en una gran variedad de situaciones hipotéticas, permitiendo al usuario elegir libremente la carga de trabajo y recursos de los que dispone SIRE durante la simulación. Finalmente se describen diversos métodos para integrar todas las herramientas que se han ido desarrollando durante el proyecto para mejorar el rendimiento general de SIRE.

This project has studied the performance of the processes associated with an Ernst & Young product, Doc Intel SIRE. SIRE is a document intelligence platform offered as SaaS (Software as a Service), meaning that EY has to maintain the solution, not just develop it. SIRE is designed using a microservices architecture hosted on an Azure Kubernetes cluster. The objective of this project is to study a historical data about SIRE execution processes in order to develop tools capable of estimating the optimal amount of resources given to each of the microservices in order to minimise execution times. The project started exploring the data avaliable, in the process several tools for data cleaning, transformation and visualisation were developed, tools that will speed up future analyses. Taking into account the conclusions obtained during the exploration phase, a simulator capable of estimating the performance of SIRE in a wide variety of hypothetical situations was developed, the simulator allows the user to freely choose the workload and resources available to SIRE during the simulation. Finally, several methods are described for integrating all the tools developed during the project to improve the overall performance of SIRE.