La ingeniería de datos es construir trampas
No se trata de herramientas, ni solo de datos. Se trata de producir abstracciones de significado, y toda abstracción tiene un costo de comprensión.
La ingeniería de datos no se trata de herramientas. No se trata solo de datos. Ni siquiera de “valor” puro, financiero o de otro tipo.
Se trata de producir abstracciones de significado.
Y necesariamente implica modular la acción, para que la acción produzca efectos más precisos y delicados. La ingeniería de datos es el proceso de diseñar y construir abstracciones que organizan esos patrones de efecto: para poder, de verdad, percibir algo.
El costo de comprensión
La belleza de orquestar información con palabras es que las abstracciones tienen un costo de energía, y no solo en el sentido físico. También tienen un costo de comprensión.
Por eso el costo de modelar un sistema de datos debería ser inversamente proporcional a su retorno y a su costo de mantenimiento. Y debería justificarse mantener una base técnica fuertemente orientada a consolidar la información producida por todo lo que podamos captar de los efectos de la organización en el mundo.
Signos vitales
Claramente los efectos principales son los financieros: son como los signos vitales de un ser vivo. Toda organización depende de insumos, y el costo de esos insumos puede, inevitablemente, convertirse en costo financiero. Eso no captura muchos aspectos sociales de la fuerza de una idea, pero sí un costo de energía real de la existencia de cualquier grupo social orientado a transformar el espacio fuera de sí mismo.
El tiempo de una persona es siempre una medida de energía disponible. Y las formas de apalancarlo están en el centro de todo lo que hacemos con datos.
Una cultura, no un departamento
La ingeniería de datos es un aspecto, una cualidad, de un espectro de técnicas y habilidades necesarias para desarrollar una cultura de datos: un organismo social orientado a producir sistemas de conocimiento sobre sus propias acciones y sus resultados, de todas las formas posibles y factibles para la organización, en cualquier momento.
Arapucas
Una arapuca es una trampa de palitos apilados en pirámide, común en el campo brasileño. El pájaro entra, toca el gatillo y la estructura cae. Es un mecanismo elegante: materiales simples, una acción precisa, y quien la dispara es quien queda atrapado. Y, a diferencia de un lazo, la arapuca atrapa al pájaro vivo.
Un buen modelo de datos funciona así. No es taxidermia, que fija el significado, lo disecciona y lo congela en un esquema. Es una estructura simple donde el significado vivo entra y puede ser observado, compartido y liberado otra vez.
La ingeniería de datos es construir trampas.