Què és un Data Catalog?
Un Data Catalog (Catàleg de Dades) és un inventari centralitzat i intel·ligent de tots els actius de dades d'una organització. Funciona com un "Google per a les teves dades internes": permet cercar, descobrir i entendre taules, columnes, dashboards, pipelines i qualsevol altre actiu de dades sense necessitat de preguntar a l'equip d'enginyeria.
A diferència d'un simple full de càlcul amb noms de taules, un catàleg de dades modern inclou metadades tècniques (tipus de dada, volums, freqüència d'actualització), metadades de negoci (descripcions llegibles, termes de glossari associats), lineage (d'on venen les dades i cap a on van), mètriques de qualitat i classificacions de sensibilitat.
El catàleg de dades és la peça central de qualsevol programa de Data Governance perquè respon les preguntes fonamentals: quines dades tenim?, on es troben?, què signifiquen?, són fiables? i qui és responsable?
Per què és important?
Un estudi d'Alation revela que els analistes de dades dediquen fins al 30% del seu temps a cercar i entendre dades abans de poder-les utilitzar. Sense un catàleg, aquesta informació viu al cap de persones clau, en documents dispersos o simplement no existeix. Quan aquestes persones canvien d'equip o abandonen l'empresa, el coneixement es perd.
A més, la duplicació de dades i la creació de "taules ombra" és un problema comú en organitzacions sense catàleg. Equips diferents creen les seves pròpies còpies de les mateixes dades, cadascuna amb transformacions lleugerament diferents, generant inconsistències en informes i decisions.
Com funciona a la pràctica?
Un catàleg de dades es connecta a les fonts de dades de l'organització (bases de dades, data warehouses, eines de BI) mitjançant connectors. Automàticament extreu la metadada tècnica: noms de taules, columnes, tipus de dada, volums i relacions. Sobre aquesta base tècnica, s'afegeix metadada de negoci: descripcions, termes de glossari, owners i classificacions.
Els usuaris interactuen amb el catàleg a través de la cerca (text lliure o filtres), la navegació per dominis o llinatges, i consultes de qualitat. Un catàleg modern també ofereix cerca semàntica mitjançant IA, suggerint actius relacionats encara que els noms tècnics no coincideixin.
Data Catalog a Linedat
El catàleg de dades de Linedat es connecta a fonts com PostgreSQL, MySQL, BigQuery, Snowflake i MongoDB, extraient automàticament la metadada tècnica. La IA genera descripcions de negoci per a taules i columnes, detecta camps PII i suggereix termes de glossari relacionats, reduint dràsticament el treball manual de documentació.
Termes relacionats
El Data Governance és el marc de polítiques, processos i rols que garanteix la qualitat, la seguretat i l'ús correcte de les dades en una organització.
Què és la Gestió de Metadades?La gestió de metadades organitza les dades sobre les teves dades: esquemes, descripcions, lineage i classificacions en un sistema centralitzat.
Què és el Data Lineage?El Data Lineage és la traçabilitat de les dades des del seu origen fins al seu destí, mostrant totes les transformacions i dependències del camí.
Què és un Business Glossary (Glossari de Negoci)?Un Business Glossary defineix el significat oficial dels termes de negoci, eliminant ambigüitats en l'ús de les dades.