Última revisión:

¿Qué es un sesgo algorítmico? Definición y retos para la empresa

Un sesgo algorítmico es una desviación sistemática de un modelo de IA, heredada de los datos de entrenamiento, de las decisiones de diseño o del contexto de despliegue, que produce decisiones inequitativas o erróneas en detrimento de un grupo de población o de un tipo de caso.

Un sesgo algorítmico puede surgir en tres etapas del ciclo de vida del modelo. Primero, en los datos de entrenamiento: si el corpus histórico refleja decisiones humanas sesgadas (contrataciones pasadas, concesiones de crédito, jurisprudencia), el modelo aprende y reproduce esos sesgos. Segundo, en las decisiones de diseño: el criterio de optimización elegido (precisión global, por ejemplo) puede producir buenos rendimientos en promedio pero errores concentrados en ciertos subgrupos. Tercero, en el contexto de despliegue: un modelo entrenado sobre datos franceses de 2018 utilizado sobre expedientes belgas de 2026 producirá desviaciones no previstas. El sesgo algorítmico no es una característica exótica de los modelos de IA, es su condición por defecto. La cuestión no es si existe, sino qué sesgos existen, con qué amplitud, y con qué consecuencias operativas. La auditoría de los sesgos es desde ya una obligación de hecho para todo despliegue de IA con impacto decisional sobre personas.

Ejemplo concreto

El caso de las ayudas para el cuidado infantil en los Países Bajos, conocido como toeslagenaffaire, es uno de los casos escuela europeos más documentados. Entre 2013 y 2019, la administración fiscal neerlandesa utilizó un sistema algorítmico para detectar los fraudes a las ayudas para el cuidado infantil. El sistema integraba la doble nacionalidad como señal de riesgo. Resultado: unas 26 000 familias, mayoritariamente procedentes de la inmigración, fueron falsamente acusadas de fraude, obligadas a reembolsar entre 20 000 y 60 000 euros, algunas abocadas al sobreendeudamiento, niños colocados en familia de acogida. El caso llevó a la dimisión del gobierno Rutte III en enero de 2021. Fuente: informe Amnistía Internacional Xenophobic Machines, octubre de 2021.

Ver también

Para profundizar

Xenophobic Machines, Amnistía Internacional, octubre de 2021 (recurso externo)

Fuentes

  1. Xenophobic Machines: Discrimination through unregulated use of algorithms in the Dutch childcare benefits scandal, Amnistía Internacional, octubre de 2021. https://www.amnesty.org/en/documents/eur35/4686/2021/en/ (consultado el 2026-05-24)
  2. AI Incident Database, Incident 101: Dutch Families Wrongfully Accused of Tax Fraud Due to Discriminatory Algorithm. https://incidentdatabase.ai/cite/101/ (consultado el 2026-05-24)

← Volver al glosario

Dirección copiada