La ciencia de datos es el campo interdisciplinar que estudia, desarrolla y aplica métodos y sistemas para obtener conocimiento a partir de grandes colecciones de datos.
Extraer conocimiento de los datos
La ciencia de datos es, en esencia, el arte y la técnica de extraer conocimiento valioso de grandes volúmenes de datos. Su objetivo no es solo recopilar información, sino entender qué revela y anticipar lo que puede ocurrir. Está presente en la vida cotidiana, a menudo de forma inadvertida: está detrás de las recomendaciones de las plataformas de música y vídeo, de la detección de fraudes bancarios, del análisis automatizado de imágenes médicas o de la predicción del tráfico a partir de la ubicación de millones de teléfonos.
Los tres pilares
Es un campo interdisciplinar, situado en la intersección de tres saberes:
- Matemáticas y estadística: para validar patrones y construir modelos que no sean fruto del azar.
- Informática: para programar algoritmos y manejar volúmenes de datos que una hoja de cálculo convencional no podría procesar.
- Conocimiento del dominio: nada de lo anterior sirve si no se entiende el problema que se quiere resolver, ya sea en medicina, finanzas, ciencias sociales o humanidades.
El ciclo de vida de un proyecto
El trabajo con datos no salta directamente a las conclusiones, sino que sigue un proceso estructurado:
- Captura: recopilación de datos de bases de datos, redes sociales, sensores o archivos digitalizados.
- Preparación: la fase más larga; consiste en corregir errores, completar huecos y dar a los datos un formato utilizable.
- Análisis exploratorio: primera inspección, con gráficos, para detectar tendencias o anomalías.
- Modelado: entrenamiento de modelos estadísticos o de aprendizaje automático (machine learning).
- Interpretación: traducción de los resultados en conocimiento y decisiones.
Cada fase se apoya en un ecosistema de herramientas: lenguajes como Python, R o SQL; bases de datos relacionales, no relacionales y almacenes en la nube; entornos de trabajo como Jupyter Notebook; plataformas de inteligencia de negocio para la visualización de datos y, cada vez más, asistentes de inteligencia artificial generativa que ayudan a escribir código o permiten consultar los datos en lenguaje natural.
Evolución del concepto
La historia de la ciencia de datos es la de la convergencia entre la estadística, la informática y la digitalización progresiva del conocimiento, que ha convertido en datos procesables una parte creciente de la actividad económica, científica y cultural.
Antecedentes: la estadística y el análisis de datos
John Tukey propuso en The Future of Data Analysis (1962) que el análisis de datos debía entenderse como una ciencia empírica propia y no solo como estadística matemática; su Exploratory Data Analysis (1977) defendió usar los datos para generar hipótesis, no solo para contrastarlas. En paralelo, el informático Peter Naur empleó la expresión «ciencia de datos» en Concise Survey of Computer Methods (1974), referida al tratamiento de los datos una vez obtenidos.
Del descubrimiento de conocimiento a una disciplina con nombre
La informatización de empresas y administraciones multiplicó las bases de datos y, con ellas, el interés por explotarlas. En 1989 se celebró el primer taller sobre descubrimiento de conocimiento en bases de datos (Knowledge Discovery in Databases, KDD) y Usama Fayyad, Gregory Piatetsky-Shapiro y Padhraic Smyth sistematizaron la minería de datos como una fase de ese proceso en From Data Mining to Knowledge Discovery in Databases (1996). Desde la estadística, Jeff Wu planteó en 1997 si su disciplina no debería llamarse ya ciencia de datos, mientras que William Cleveland propuso en 2001 un plan para ampliarla en esa dirección mediante la colaboración con la informática.
La digitalización del conocimiento y el big data
Internet, las plataformas digitales, los sensores y la digitalización masiva de archivos y bibliotecas hicieron que los datos dejaran de ser escasos. Manuel Castells había descrito en The Rise of the Network Society (1996) un informacionalismo en el que la generación y el procesamiento de información se convierten en la principal fuente de productividad; la ciencia de datos es, en buena medida, la caja de herramientas de esa transformación. En la ciencia, The Fourth Paradigm (2009), inspirado en Jim Gray, presentó la investigación intensiva en datos como un nuevo modo de producir conocimiento, junto a la experimentación, la teoría y la simulación. Chris Anderson fue más allá en «The End of Theory» (2008), un artículo en Wired que sostenía que la abundancia de datos haría innecesarios los modelos teóricos. La profesión adquirió nombre propio en esos años: DJ Patil popularizó el título de científico de datos en LinkedIn y él y Thomas Davenport presentaron el oficio como el más atractivo del siglo en Data Scientist: The Sexiest Job of the 21st Century (2012), un artículo de la Harvard Business Review.
De los datos a la inteligencia artificial
Desde mediados de la década de 2010, el aprendizaje profundo y, más tarde, los modelos generativos han desplazado parte de la atención hacia la inteligencia artificial. La ciencia de datos se ha convertido en su infraestructura: los grandes modelos de lenguaje dependen de la recopilación, la limpieza y la curación de enormes corpus textuales y la calidad de esos datos condiciona sus resultados.
Lecturas críticas
Frente al optimismo de Anderson, una corriente crítica, con fuerte presencia de las humanidades y las ciencias sociales, ha cuestionado la supuesta neutralidad de los datos. Lisa Gitelman tituló un volumen colectivo con la idea de que los datos en bruto son un oxímoron («Raw Data» Is an Oxymoron, 2013): todo dato es fruto de decisiones sobre qué medir y cómo. Johanna Drucker (Humanities Approaches to Graphical Display, 2011) propuso hablar de capta —lo que se toma— en lugar de data —lo que se da— para subrayar ese carácter construido. Danah boyd y Kate Crawford (Critical Questions for Big Data, 2012) y Rob Kitchin (Big Data, New Epistemologies and Paradigm Shifts, 2014) rebatieron la idea de que los datos hablan por sí solos, una forma renovada de positivismo.
Otras críticas apuntan al poder. Shoshana Zuboff (The Age of Surveillance Capitalism, 2019) describe el capitalismo de la vigilancia como un modelo que convierte la experiencia humana en materia prima y Nick Couldry y Ulises Mejias hablan de colonialismo de datos (The Costs of Connection, 2019). Cathy O’Neil (Weapons of Math Destruction, 2016) y Virginia Eubanks (Automating Inequality, 2018) documentaron cómo los modelos automatizados reproducen y amplían desigualdades y Catherine D’Ignazio y Lauren Klein (Data Feminism, 2020) propusieron una práctica de datos que pregunte quién los recoge, para qué y en beneficio de quién. En las humanidades digitales, la «lectura distante» de Franco Moretti (Distant Reading, 2013) mostró las posibilidades del análisis masivo de textos y abrió un debate sobre lo que se pierde cuando la interpretación se sustituye por el recuento.
Ejemplos y casos
La ciencia de datos se aplica en ámbitos muy diversos y sus casos más conocidos ilustran tanto su potencial como sus límites.
Recursos relacionados
- Análisis de datos: Entrada del glosario sobre el proceso de inspeccionar y modelar datos, núcleo del trabajo en ciencia de datos.
- Datos abiertos: Entrada del glosario sobre los datos de libre acceso y reutilización, materia prima de muchos proyectos.
- Gobernanza de datos: Entrada del glosario sobre las reglas y responsabilidades que aseguran la calidad y el uso legítimo de los datos.
- Data storytelling: Entrada del glosario sobre cómo comunicar los resultados de un análisis mediante relatos y visualizaciones.
- RStudio: Ficha de la Biblioteca sobre el entorno de desarrollo más extendido para trabajar con R.
- KNIME: Ficha de la Biblioteca sobre una plataforma visual para construir flujos de análisis de datos sin programar.
- Software gratuito de visualización de datos: Artículo del blog con una selección de herramientas para representar datos de forma gráfica.
Bibliografía recomendada
- Estadística práctica para ciencia de datos con R y Python (Peter Bruce, Andrew Bruce y Peter Gedeck, 2022): Repaso de más de cincuenta conceptos estadísticos esenciales desde la práctica, con ejemplos en R y Python. Útil para quien quiera entender la base estadística del campo sin perderse en la teoría.
- Armas de destrucción matemática (Cathy O’Neil, 2017): Una matemática con experiencia en finanzas y en ciencia de datos muestra, con casos de educación, empleo, crédito o justicia, cómo los modelos opacos pueden ampliar la desigualdad. Publicado originalmente en inglés en 2016.
- Data Feminism (Catherine D’Ignazio y Lauren F. Klein, 2020): Propuesta para hacer ciencia de datos desde el feminismo interseccional, atenta a quién recoge los datos, con qué fines y a quién beneficia. Sin traducción al español, pero de libre acceso en línea.
- Fuente: EMBL, «AlphaFold wins Nobel Prize in Chemistry 2024».
- Fuente: Science, 331(6014).
- Fuente: Science, 343(6176).
- Fuente: INE, estadística experimental de movilidad.
- Fuente: ProPublica, «Machine Bias» (2016).
- Fuentes: NBC Bay Area; /Film.