Implementación de un sistema Big Data que permita alertar en tiempo real posibles irregularidades en la contratación del gasto público

Abstract

En las últimas décadas, el desarrollo de las tecnologías se ha involucrado en todos los sectores y acciones de la vida humana, la inteligencia artificial, el metaverso, las super aplicaciones, la nube pública, las tecnologías Big Data, entre otras y todas estas son tan importante porque al aprovecharse puede combatir diferentes problemáticas que aquejan a la sociedad en general en cualquier ámbito, en temas relacionados a la salud, al sector financiero, al sector agropecuario, agroindustrial, ciudades inteligentes, a la gestión de recursos públicos y a una interminable lista de posibles casos donde se puede utilizar este tipo de tecnologías para resolver problemas cotidianos. Este proyecto se limita a una de las problemáticas que más impacto tiene a nivel mundial; la corrupción. Este mal que viene aquejando durante los últimos años y cada vez más, a la mayoría de los gobiernos que no tienen como controlar todos los recursos del estado, su contratación y compras, debido a la gran cantidad de contratos que se generan día a día.

Aquí es donde empieza a jugar un papel tan importante el Big Data, puesto que tiene el potencial de transformar las funciones gubernamentales y es ideal para solucionar problemáticas en diferentes casos de uso relacionados con la corrupción del sector público.

Un claro ejemplo sobre la problemática mencionada se presenta en Colombia, donde entidades como Transparencia Colombia y Monitor Ciudadano de la Corrupción en su informe (Radiografía de los hechos de corrupción en Colombia, 2019) del año 2019 indicó que el país perdió más de 17,9 billones de pesos. Además, se evidenció que el 73% del total de los hechos analizados respondieron a casos de corrupción administrativa; de este porcentaje más de la mitad compromete a la contratación pública, dividida en la adjudicación o celebración irregular de contratos, abuso de la figura de contratación directa, detrimento patrimonial por incumplimiento del objeto contratado y sobrecostos por irregularidades en la celebración de contratos son los que casos que más resaltan.

Es por eso, que se plantea el estudio de arquitecturas de referencia, herramientas y tendencias para procesar grandes cantidades de datos en tiempo real e históricos y el diseño e implementación de la arquitectura que sea capaz de procesar los datos disponibles, en el caso de uso de los contratos de gasto público en Colombia. De este modo, se desarrollaron procesamientos capaces de analizar la información histórica identificada e ingestada dentro de la arquitectura que permiten generar alertas tempranas de posibles irregularidades y sobrecostos en los contratos de gasto público y posterior a eso llegar a la visualización de toda la información en tableros de control.

La arquitectura planteada beneficiará a otras áreas de estudio, ya que servirá como punto de partida para que ahonden sus esfuerzos en la exploración y explotación de los datos y más no en el proceso de investigación y diseño de una arquitectura. Acá se genera una arquitectura lista para utilizar a partir de infraestructura como código y así se ahorrarán los esfuerzos de investigación. Esto servirá para futuras investigaciones sobre el uso de Big Data en la búsqueda de irregularidades en contratos de gasto público.

In recent decades, the development of technologies has been involved in all sectors and actions of human life, artificial intelligence, the metaverse, super applications, the public cloud, Big Data technologies, among others, and all of these are so important because when taking advantage of it, it can combat different problems that afflict society in general in any field, in issues related to health, the financial sector, the agricultural and agro-industrial sector, smart cities, the management of public resources and an endless list of possible cases where this type of technology can be used to solve everyday problems. This project is limited to one of the problems that has the greatest impact worldwide, corruption. This evil has been afflicting in recent years and more and more, most governments that do not have a way to control all state resources, their hiring, and purchases, due to the large number of contracts that are generated every day.

This is where Big Data begins to play such an important role, since it has the potential to transform government functions and is ideal for solving problems in different use cases related to corruption in the public sector.

A clear example of the mentioned problem is presented in Colombia, where entities such as Transparency Colombia and the Citizen Monitor of Corruption in their report (Radiography of the facts of corruption in Colombia, 2019) of the year 2019 indicated that the country lost more than 17, 9 billion pesos. In addition, it was evidenced that 73% of the total events analyzed responded to cases of administrative corruption; Of this percentage, more than half commits to public procurement, divided into the awarding or irregular execution of contracts, abuse of the figure of direct contracting, patrimonial detriment due to noncompliance with the contracted object and cost overruns due to irregularities in the execution of contracts are those that cases that stand out the most.

That is why, the study of reference architectures, tools, and trends to process large amounts of data in real-time and historical and the design and implementation of the architecture that is capable of processing the available data, in the case of use, is proposed of public spending contracts in Colombia. In this way, processes were developed capable of analyzing the historical information identified and ingested within the architecture that allows generating early alerts of possible irregularities and cost overruns in public spending contracts and after that, reaching the visualization of all the information on dashboards of control.

The proposed architecture will benefit other areas of study since it will serve as a starting point for them to deepen their efforts in the exploration and exploitation of data and not in the process of research and design of an architecture. Here, a ready-to-use architecture is generated from infrastructure as code; thus, research efforts will be saved. This will serve for future research on the use of Big Data in the search for irregularities in public spending contract.