Saltar al contenido

La auditoría de datos y el Janitor

Limpieza de datos automática

Encuentra lo que está mal en tus datos. Y luego los limpia contigo.

Más de 180 controles en cada tabla en cuanto llega. La auditoría de datos ordena lo que encontró según las respuestas a las que afecta, y el Janitor te pregunta solo lo que únicamente tú puedes decidir. Después crea una vista limpia que usan todas las respuestas.

Limpieza de datos agéntica

Conoce a tu Janitor

Pulsa Limpiar esta tabla y el Janitor se pone a trabajar. Lee lo que encontró la auditoría de datos, prueba cada corrección en tus propias filas y solo se detiene en las decisiones que no puede tomar solo. Eso es la limpieza de datos agéntica: el agente hace el trabajo y tú tomas las decisiones que cambian un número.

  1. Ponlo en marcha en una tabla o una nota

    Pulsa Limpiar esta tabla en una tabla, o Preguntar al Janitor en una sola nota. Ya tiene la evidencia que midió la auditoría.

  2. Te pregunta solo lo que tú decides

    ¿El mes primero o el día primero? ¿Qué columna de moneda manda? ¿Qué fila duplicada se queda? Cada pregunta llega como una tarjeta de opciones con su recomendación primero.

  3. Te muestra el plan

    Una tarjeta de revisión enumera cada corrección y lo que dejará como está. No se crea nada hasta que pulsas Crear la vista limpia.

  4. Obtienes una vista limpia

    El resultado es una vista nueva que puedes abrir, y la tarjeta de la tabla muestra Limpiada como con su nombre. El original queda exactamente como llegó.

Una grabación sin sonido. Se le pide al Janitor que limpie un archivo de pedidos de un marketplace. Hace tres preguntas como tarjetas de opciones, cada una con su recomendación primero: fechas con el mes o el día primero, qué columna de moneda manda y qué fila duplicada conservar. Muestra una tarjeta de revisión con cada corrección, se crea la vista y la tabla pasa a mostrar Limpiada como Marketplace orders, cleaned.

Una ejecución real: tres preguntas, una tarjeta de revisión y luego una vista limpia.

Calidad de datos automática

La auditoría de datos: más de 180 controles en cada tabla en cuanto llega

Cada tabla que subes o conectas se revisa al llegar, antes de que nadie haga una pregunta, y cada vista se revisa mientras se crea. Busca los problemas que todo el mundo sabe buscar y también los que a nadie se le ocurriría buscar. Lo que encuentra va a una sola página, la auditoría de datos, con lo más urgente primero y el motivo por el que importa cada problema.

La página de auditoría de datos: el Janitor en el panel de chat, contadores de 172 notas abiertas, 53 importantes, 90 para vigilar, 29 informativas y 10 resueltas, un buscador con filtros de estado, gravedad, conector y tabla, y la tarjeta de una tabla con una nota de claves duplicadas, sus etiquetas de por qué importa y los botones Reconocer, Descartar, Crear un hecho y Preguntar al Janitor
Una página para cada problema que encontró la auditoría, lo más urgente primero.

Lo que buscan los controles

  • Valores vacíos disfrazados

    N/A, un guion o un vacío guardados como texto, 1900-01-01 en lugar de una fecha desconocida, 999 en lugar de una edad desconocida.

  • Números y fechas guardados como texto

    Importes con $, € o comas, negativos entre paréntesis, dos formatos de número o varios formatos de fecha en una columna, números de serie de Excel que se hacen pasar por fechas.

  • Grafías y nombres

    Retail, retail y RETAIL contados como tres canales, sí/no escrito de seis maneras, un mismo ID con varios nombres.

  • Duplicados y claves

    Filas repetidas exactamente, claves que se repiten y claves que se repiten y no coinciden en las cifras.

  • Valores imposibles

    Cantidades negativas, porcentajes por encima de 100, fechas en el futuro, un total que no es la suma de sus partes.

  • Estructura de hoja de cálculo

    Filas de totales dentro de los datos, encabezados repetidos a mitad del archivo, meses dispuestos como columnas, un archivo cortado en la última fila de Excel.

  • IDs y codificación

    Códigos postales que perdieron el cero inicial, IDs exportados como 1.23E+11, acentos deformados, caracteres invisibles dentro de los valores.

  • Tiempo y actualidad

    Una tabla que dejó de actualizarse, un último mes cargado a medias, huecos en una serie, un saldo acumulado que nunca debe sumarse.

  • Orden de los eventos

    Una fecha de fin anterior a la de inicio, un envío que nunca se entregó, una oportunidad cerrada antes de que existiera su cuenta.

  • Contra tu diccionario de datos

    Códigos en los datos que tu diccionario no recoge, y columnas documentadas como números pero guardadas como texto.

Prioridad

Ordenado por lo que le hace a tus respuestas

Cada nota se marca como Importante, Vigilar o Info, y se ordena según cuánto se apoya tu negocio en esa columna. Un problema en una columna que alimenta un KPI o una pregunta guardada va antes que uno estético en una tabla que nadie usa, y la nota dice a qué preguntas afecta.

Cada nota dice qué preguntas y pasos leen la columna.

Tú decides

Un hallazgo es algo que puedes gestionar

Reconoce lo que ya conoces. Descarta lo que aquí no es un problema, y el motivo se guarda. Conviértelo en un hecho y los agentes lo leerán cada vez que usen esos datos. Selecciona un rango para gestionar varias notas a la vez, y busca en toda la auditoría mientras escribes.

Una grabación sin sonido que recorre la tarjeta de una tabla en la auditoría de datos: un número de serie de Excel que se hace pasar por fecha, códigos postales sin el cero inicial y claves duplicadas, cada nota con la proporción de filas afectadas, ejemplos y un pequeño gráfico hecho a partir de la medición.

La evidencia, no una puntuación: la proporción de filas y una imagen de la medición.

Datos desordenados, detectados

Ejemplos de lo que detecta

Problemas como estos pasan años en los datos, hasta que alguien dice que el número está mal.

  • Un cliente contado como dos

    Un espacio invisible, de ancho cero o al final, convierte "Acme" y "Acme " en dos clientes. En pantalla no se ve nada raro, y el total se parte en dos.

  • Mes primero y día primero en una columna

    ¿01/08/2024 es el 8 de enero o el 1 de agosto? El control demuestra el orden a partir de valores mayores que 12 y señala una columna que mezcla ambos. Cuando los datos no lo resuelven, el Janitor te pregunta.

  • Una fila de total general dentro de los datos

    Una fila de totales olvidada en una exportación de hoja de cálculo se cuenta otra vez en cada suma que se construye sobre ella.

  • Símbolos de moneda en una columna numérica

    $1,014.08, USD 1023.11 y ($286.05) en una columna. Una conversión simple deja algunos valores en blanco y lee el negativo entre paréntesis como positivo.

  • Decimales europeos, mil veces más pequeños

    1.234,56 puede acabar como 1.23456 sin ningún error. Los separadores mezclados se señalan, así que la columna no pasa por limpia.

  • El mismo id de pedido, dos totales distintos

    Dos filas para el pedido 5521 que no coinciden. Nada en los datos dice cuál es la correcta, así que se convierte en una decisión tuya, no en una suposición silenciosa.

  • Un hueco en una serie diaria

    Ninguna fila del 3 al 17 de marzo, o un último mes con 15 filas frente a las 61 habituales, de modo que cada tendencia termina en una caída que nunca ocurrió.

  • Códigos que se apartaron del diccionario de datos

    La columna region contiene 9 donde tu diccionario de datos recoge del 1 al 4. La auditoría compara las columnas codificadas con tu propio diccionario.

  • Fechas de relleno

    34.000 fechas de nacimiento con 1900-01-01 hacen que el cliente medio tenga 120 años.

Pantallas capturadas en Querri con datos de una empresa de demostración.

Nada se reescribe en silencio

Cada corrección es una vista que puedes abrir

Tus datos en bruto se quedan exactamente como llegaron. El trabajo del Janitor se convierte en una vista limpia: SQL que puedes abrir, con la fuente todavía ahí para compararla.

La prueba de que la limpieza funcionó

Querri vuelve a medir la vista limpia con los mismos controles. Una nota se marca como resuelta solo cuando su problema ya no aparece. La que sigue apareciendo se queda abierta, y el Janitor te lo dice.

Se limpia una vez y se usa en todas partes

La fuente muestra entonces Limpiada como con el nombre de la vista, y cada respuesta, dashboard y agente de IA lee la vista limpia a partir de ese momento.

Decisiones que se mantienen

Descarta una nota con un motivo y queda resuelta. El siguiente agente que toque la tabla lee tu decisión en lugar de volver a plantear el problema.

La tarjeta de marketplace_formats.csv en la auditoría de datos con 0 notas abiertas y una insignia verde que dice Limpiada como Marketplace orders cleaned, sobre una nota de formato numérico mixto marcada como resuelta
Todas las notas de esta tabla, resueltas, y la tarjeta nombra la vista limpia.

Cómo encaja

Desde el momento en que llegan tus datos

  1. Sube o conecta

    Una exportación de hoja de cálculo, un CSV, o tablas de un sistema conectado o una base de datos. La Biblioteca las reúne todas.

  2. La auditoría se ejecuta al llegar los datos

    Los controles se ejecutan dentro del análisis que Querri ya hace cuando llega una tabla, y otra vez en cada vista mientras se crea. Nadie tiene que pedirlo.

  3. Limpia con el Janitor

    Recorre la auditoría de datos de lo más urgente a lo menos, o pulsa Limpiar esta tabla y responde a las decisiones que te corresponden.

  4. Cada respuesta ya lo sabe

    Las notas abiertas viajan con la columna en las instrucciones de cada agente. Cuando los datos obligaron a elegir, la respuesta te dice qué opción tomó.

Preguntas frecuentes

Preguntas sobre la limpieza de datos automática

¿Qué es la limpieza de datos automática?

La limpieza de datos automática significa que los problemas de tus datos se encuentran y se corrigen sin que nadie tenga que escribir reglas ni scripts antes. En Querri, la auditoría de datos aplica más de 180 controles de calidad de datos a cada tabla en cuanto llega, y el Janitor, un agente de IA, limpia contigo lo que encontró. El resultado es una vista limpia que las respuestas, los dashboards y los agentes usan a partir de ese momento.

¿Qué es una auditoría de datos?

Una auditoría de datos es una revisión sistemática de un conjunto de datos en busca de los problemas que hacen que sus números estén mal: valores vacíos disfrazados, números guardados como texto, duplicados, formatos mezclados, huecos. En Querri, la auditoría de datos es una página que aplica más de 180 controles a cada tabla en cuanto llega y enumera lo que encontró, con lo más urgente primero y el motivo por el que importa cada problema.

¿Qué es la calidad de datos automática?

Controles de calidad de datos que se ejecutan sin que nadie escriba una regla ni los pida. Querri revisa cada tabla al subirla o conectarla y cada vista al crearla, y registra cada problema que encuentra como una nota de calidad de datos que puedes reconocer, descartar o limpiar.

¿Qué significa limpieza de datos agéntica?

Un agente de IA hace el trabajo de limpieza contigo en lugar de entregarte una lista. El Janitor lee la evidencia de la auditoría de datos, prueba correcciones en tus filas, te pregunta lo que solo tú puedes decidir, te muestra su plan y crea una vista limpia cuando lo apruebas. Después Querri vuelve a medir esa vista para demostrar qué problemas han desaparecido.

¿Qué fuentes de datos puede limpiar Querri?

Cualquier tabla que llegue a Querri, desde un archivo o un conector. Eso incluye Shopify, Stripe, Salesforce, HubSpot, Pipedrive, QuickBooks, NetSuite, Klaviyo, Mailchimp, Intercom, Zendesk, Google Ads, Meta Ads, Amazon Seller, Google Analytics, Mixpanel, Amplitude, almacenes de datos y bases de datos como Snowflake, BigQuery, Redshift, Postgres, MySQL, SQL Server y Oracle, archivos en Google Drive, y hojas de cálculo y CSV subidos. La limpieza de datos de pedidos de Shopify o de oportunidades de Salesforce funciona igual que la de un CSV exportado.

¿Puedo limpiar datos de varias fuentes antes de unirlos?

Sí. Cada tabla tiene su propia auditoría y su propia vista limpia, así que primero limpias cada fuente y luego unes las vistas limpias. Las fechas quedan en un solo formato, las monedas se tratan como hayas decidido, las grafías se unifican y los IDs se reparan dentro de cada fuente, que es lo que permite que la unión cuadre. La auditoría también revisa las claves de unión detectadas entre tablas, como filas hijas cuya clave no tiene coincidencia en la tabla principal.

¿Limpia exportaciones de Excel y Google Sheets?

Sí. Las exportaciones de hojas de cálculo tienen controles propios: filas de totales y subtotales dentro de los datos, encabezados repetidos a mitad del archivo, meses dispuestos como columnas, números de serie de Excel que se hacen pasar por fechas, IDs convertidos en 1.23E+11, códigos postales que perdieron el cero inicial y un archivo que se detuvo en la última fila de Excel. Sube la exportación tal cual y la auditoría de datos enumera lo que encontró.

¿Puede estandarizar fechas y monedas entre sistemas?

Dentro de cada tabla, sí, y eso es lo que hace que las tablas de distintos sistemas coincidan. La auditoría detecta varios formatos de fecha en una columna, demuestra a partir de los valores, cuando puede, si va primero el día o el mes, y señala monedas mezcladas o importes cuya moneda no coincide con la columna de moneda. El Janitor te pregunta lo que solo tú puedes decidir, como si convertir las monedas o mantenerlas separadas, y la vista limpia escribe cada fecha y cada importe de una sola manera.

¿Cómo trata los duplicados?

Distingue tres casos: filas repetidas exactamente, claves que se repiten con los mismos valores y claves que se repiten pero no coinciden, como un id de pedido con dos totales. Los dos primeros se pueden agrupar sin más. Cuando las repeticiones no coinciden, nada en los datos dice cuál es la correcta, así que el Janitor te pregunta qué fila conservar, con su recomendación primero.

¿Cambia mis datos originales o hace una copia?

Tus datos en bruto se quedan exactamente como llegaron. La corrección es una vista limpia, definida en SQL que puedes abrir y construida a partir de la fuente en lugar de escribir encima. La fuente sigue a su lado para que puedas comparar una con otra.

¿Qué es una vista limpia y sigue funcionando cuando llegan datos nuevos?

Una vista limpia es una vista guardada que aplica las correcciones del Janitor a la tabla de origen, y la fuente pasa a mostrar Limpiada como con el nombre de la vista. Como es una definición guardada y no una edición puntual, funciona igual con los datos del mes siguiente. Cuando la vista se reconstruye, Querri vuelve a medirla, y un problema que reaparece vuelve a abrir su nota.

¿En qué se diferencia de una herramienta de calidad de datos o de un script de limpieza?

Muchas herramientas de calidad de datos vigilan pipelines para ingenieros, o muestran estadísticas de columnas y esperan a que alguien construya la corrección, y un script de limpieza solo revisa aquello para lo que se escribió. Querri aplica sus controles a cada tabla antes de que nadie pregunte, ordena lo que encontró según las preguntas y los KPI que leen cada columna, te pregunta las decisiones que cambian un número y construye la corrección como una vista que después vuelve a medir.

¿Quién ve las notas de calidad de datos y quién aprueba una corrección?

Las notas siguen las mismas reglas de acceso que las tablas que describen, y cuando alguien solo puede ver parte de las filas, se omiten los valores de ejemplo. Ninguna corrección se aplica sola: el Janitor muestra su plan en una tarjeta de revisión y crea la vista limpia solo cuando la persona que trabaja con él lo aprueba.

¿Puedo decirle una regla una sola vez?

Sí. Descarta una nota con un motivo y queda resuelta, así que el siguiente agente lee tu decisión en lugar de volver a plantear el problema. Usa Crear un hecho para guardar lo que sabes sobre los datos, y los agentes leerán ese hecho cada vez que los usen.

Se acabaron los lunes por la mañana arreglando la exportación.

Mira la auditoría de datos sobre tus propias tablas y limpia una con el Janitor.