{"id":39244,"date":"2023-12-26T11:00:25","date_gmt":"2023-12-26T10:00:25","guid":{"rendered":"https:\/\/www.hiberus.com\/crecemos-contigo\/?p=39244"},"modified":"2024-01-10T08:29:32","modified_gmt":"2024-01-10T07:29:32","slug":"agilizando-proyectos-de-bi-diccionario-de-datos-y-sql-automatico","status":"publish","type":"post","link":"https:\/\/www.hiberus.com\/crecemos-contigo\/agilizando-proyectos-de-bi-diccionario-de-datos-y-sql-automatico\/","title":{"rendered":"Agilizando proyectos de BI: diccionario de datos y SQL autom\u00e1tico"},"content":{"rendered":"

En los proyectos de BI<\/a><\/strong>, donde la velocidad y precisi\u00f3n son esenciales, resulta crucial contar con una estructura de datos robusta y bien documentada. En este contexto, el uso de un buen diccionario de datos<\/strong> se convierte en un recurso de valor incalculable. Este diccionario debe proporcionar una visi\u00f3n panor\u00e1mica de todas las tablas de la base de datos del proyecto<\/strong>, as\u00ed como detallar la estructura de cada una<\/strong> (columnas, tipos de datos, campos no nulos, restricciones, etc.), proporcionando as\u00ed un marco s\u00f3lido para el desarrollo del proyecto.<\/p>\n

En este art\u00edculo mostraremos la plantilla que desarrollamos desde el equipo de Oracle y c\u00f3mo agilizamos el proceso de creaci\u00f3n de tablas en base de datos gracias a un script de Python.<\/p>\n

La plantilla del diccionario de datos para proyectos de BI<\/h2>\n

La estructura de la plantilla que desarrollamos consta, en su estado actual, de los elementos b\u00e1sicos para describir las tablas del modelo y sus caracter\u00edsticas. Consta de varias hojas de prop\u00f3sito general y de una hoja para cada tabla. Describimos a continuaci\u00f3n cada una de ellas.<\/p>\n

\"\"<\/p>\n

Hoja \u201cControl de Cambios\u201d<\/h3>\n

Esta hoja inicial permite llevar el seguimiento de los autores del documento y controlar sus versiones. El script de Python no utiliza esta hoja, por lo que puede modificarse su estructura a placer sin afectar su funcionamiento.<\/p>\n

\"\"<\/p>\n

Hoja \u00abControl de Cambios\u00bb<\/p>\n

Hoja \u201cResumen Tablas\u201d<\/h3>\n

Esta hoja es la pieza central del diccionario de datos<\/strong>. Posee una fila por cada tabla, donde incluye su nombre, esquema, enlace a la hoja individual de la tabla, etc. El script solo tendr\u00e1 en cuenta las dos primeras columnas de esta hoja, por lo que la estructura del resto puede modificarse sin afectar su funcionamiento. Es importante fijarse en que se mantiene una columna vac\u00eda a la izquierda del nombre de tabla. En esta marcaremos con una \u201cx\u201d las tablas que queramos que el script tenga en cuenta a la hora de generar el c\u00f3digo SQL.<\/p>\n

\"\"<\/p>\n

Hoja \u00abResumen Tablas\u00bb<\/p>\n

Una hoja por cada tabla<\/h3>\n

Para cada tabla descrita en la pesta\u00f1a \u201cResumen tablas\u201d, crearemos una hoja nueva que se deber\u00e1 llamar exactamente igual que la tabla. Esta hoja incluye, entre otras cosas, una tabla donde indicamos su estructura (nombres de columna, tipos de datos, nulos, campos de la clave primaria y comentarios). Se incluye tambi\u00e9n un enlace para volver al resumen. A partir de esta hoja, el script de Python generar\u00e1 autom\u00e1ticamente el c\u00f3digo SQL para crear la tabla.<\/p>\n

\"\"<\/p>\n

Hoja para la tabla de ejemplo \u00abDIM_EJEMPLO_1\u00bb<\/p>\n

Creaci\u00f3n autom\u00e1tica de c\u00f3digo SQL de creaci\u00f3n de tablas<\/h2>\n

Una vez completado el diccionario, surge la necesidad de traducir esta informaci\u00f3n en la creaci\u00f3n real de tablas en la base de datos. Hacerlo a mano puede ser costoso si la cantidad de tablas es grande, adem\u00e1s de que estar\u00edamos repitiendo trabajo (pues ya hemos escrito toda la estructura de las tablas en el diccionario) y nos expondr\u00edamos a m\u00e1s errores manuales. Gracias al uso de una plantilla bien estructurada como la que hemos definido, podemos utilizar en su lugar un script que lea el Excel y genere de forma autom\u00e1tica el c\u00f3digo de SQL de creaci\u00f3n de las tablas<\/strong>.<\/p>\n

En nuestro caso, utilizamos Python para esta tarea. Desarrollamos un script auto_tablas_sql.py<\/em> al que llamamos pas\u00e1ndole el nombre de nuestro Excel del diccionario de datos como par\u00e1metro. Para ello utilizamos el m\u00f3dulo de Python xlwings<\/em>, que nos proporciona m\u00e9todos para recorrer de forma sencilla las celdas de un libro de Excel. Su documentaci\u00f3n oficial puede encontrarse aqu\u00ed<\/a>.<\/p>\n

El script generar\u00e1 en el directorio de trabajo los siguientes elementos:<\/p>\n