Unidad 1

Inteligencia Artificial: Retos, Riesgos, Límites y Oportunidades de una Tecnología que Nos Está Redefiniendo

¿Y si la herramienta más poderosa jamás creada estuviera ya en nuestras manos… pero no tuviéramos idea de cómo usarla con sabiduría?

La Inteligencia Artificial (IA) ha dejado de ser ciencia ficción. Está aquí, integrándose a nuestras rutinas: recomienda lo que comemos, clasifica nuestras fotos, responde correos, corrige textos, califica tareas, analiza emociones (algo que la Unión Europea prohíbe en escuelas y lugares de trabajo desde febrero de 2025, salvo por motivos médicos o de seguridad), entrevista candidatos, vigila movimientos y hasta predice enfermedades.

Pero con ese poder viene una paradoja: cuanto más útil se vuelve, más frágiles parecen nuestros marcos éticos, sociales y educativos para sostenerla. La IA no es solo un avance técnico. Es un punto de inflexión civilizatorio. Y entender sus retos, riesgos, límites y oportunidades ya no es opcional: es una forma de alfabetización esencial del siglo XXI.

Las cuatro miradas de esta unidad sobre la IA: retos, riesgos, límites y oportunidades. Retos¿Cómo guiamos unatecnología que noentiende lo que hace? RiesgosCuando se convierteen una caja negrapeligrosa LímitesLo que (aún) no puedehacer OportunidadesCuando la tecnologíaamplifica lo humano
Las cuatro miradas de esta unidad sobre la IA: retos, riesgos, límites y oportunidades.

I. Retos de la IA: ¿Cómo guiamos una tecnología que no entiende lo que hace?

1. Falta de comprensión pública

El primer reto es que muchos usan IA sin saber que la están usando. Desde una app de edición de fotos hasta una plataforma de atención al cliente, la IA está tan integrada que se vuelve invisible. Esta opacidad tecnológica lleva a que la ciudadanía tenga una relación de dependencia, sin comprensión ni poder de decisión.

Haz la prueba con cualquier grupo: pon lado a lado un texto o una imagen generados por IA y uno hecho por una persona. Con los modelos ya medidos entre 2021 y 2023, lo incómodo es cuánto cuesta distinguirlos de forma fiable a simple vista (con rostros, 48,2 % de acierto: Nightingale y Farid, 2022; con textos de autopresentación, 50–52 %: Jakesch, Hancock y Naaman, 2023).

¿Cómo enseñar a las personas a convivir con algo que no ven ni entienden?

2. Gobernanza y regulación fragmentada

Mientras la IA evoluciona globalmente, las leyes avanzan a paso desigual. La Ley de IA de la Unión Europea (EU AI Act, adoptada en 2024 y en aplicación progresiva desde 2025) establece una clasificación por niveles de riesgo (capítulos II y III). Fue modificada por el Reglamento (UE) 2026/1744: las obligaciones de alto riesgo del anexo III, que incluye usos educativos (admisión, evaluación de resultados, nivel educativo y supervisión de exámenes), se aplican desde el 2 de diciembre de 2027. Y en América Latina los marcos avanzan: Brasil exige desde marzo de 2026 verificar la edad en los servicios digitales sin autodeclaración (Lei 15.211/2025, «ECA Digital») y su Ministerio de Educación publicó en 2026 un documento orientador sobre IA en la educación básica; Chile aplicará desde diciembre de 2026 una nueva ley de datos personales con reglas propias para niñas y niños (Ley 21.719); y en República Dominicana el MINERD prohibió en mayo de 2026 grabar o difundir imágenes, videos o audios de estudiantes sin consentimiento previo (Orden Departamental 011-2026, según el comunicado del MINERD del 27 de mayo de 2026), y el Consejo Nacional de Educación aprobó en junio de 2026 formalizar mediante ordenanza la Estrategia Nacional de Competencias Digitales, que integra las competencias en inteligencia artificial en el currículo (según el comunicado del MINERD del 10 de junio de 2026). Todo esto, al 23 de septiembre de 2026.

El reto es establecer reglas claras sin frenar la innovación. ¿Quién audita un modelo de IA entrenado por miles de millones de datos opacos? ¿Cómo se exige rendición de cuentas a un sistema que aprende de forma autónoma?

3. Inclusión tecnológica

La IA puede amplificar desigualdades si solo está disponible para quienes tienen acceso, conocimiento y conectividad. La guía AI and education: Guidance for policy-makers de la UNESCO (2021, §3.3, p. 21) advierte que, sin una intervención política eficaz, el despliegue de la IA en educación tenderá a ampliar, en lugar de reducir, las desigualdades de aprendizaje existentes.

La desigualdad no es solo de acceso: también está en lo que la herramienta da por supuesto. En uno de los ensayos reunidos por la UNESCO en The algorithm in the room, James Maisiri y Solomon Musonza recogen un ejemplo que citan de otros investigadores: «when researchers asked ChatGPT and Gemini how many seasons there are, they both responded ‘four’. In West Africa, however, there are two main seasons» (Maisiri y Musonza, en UNESCO, 2026, p. 91). Es decir: preguntadas por cuántas estaciones tiene el año, ambas herramientas respondieron «cuatro», cuando en África Occidental hay dos estaciones principales. Es la opinión de sus autores, no una posición oficial de la UNESCO, y el estudio que citan no se verificó aquí; pero la pregunta que deja es útil para tu aula: ¿qué da por supuesto la herramienta sobre el lugar donde viven tus estudiantes?

II. Riesgos de la IA: Cuando una herramienta poderosa se convierte en una caja negra peligrosa

1. Reproducción de sesgos

La IA aprende de datos. Y los datos están llenos de prejuicios históricos, sociales y culturales. ¿Resultado? Sistemas que discriminan por género, etnia, edad o clase social.

Un estudio de Joy Buolamwini (MIT Media Lab) y Timnit Gebru (2018, FAT*, PMLR 81) mostró que sistemas comerciales de clasificación de género a partir del rostro tenían un error máximo del 0,8 % para hombres de piel clara, pero de hasta el 34,7 % para mujeres de piel oscura (Buolamwini y Gebru, «Gender Shades», resumen, p. 1).

Gender Shades (Buolamwini y Gebru, 2018): error máximo de sistemas comerciales de clasificación de género a partir del rostro, del 0,8 % en hombres de piel clara a hasta el 34,7 % en mujeres de piel oscura. Hombres de piel clara 0,8 % Mujeres de piel oscura hasta 34,7 % 0 % 10 % 20 % 30 % 40 % error de clasificación
Gender Shades (Buolamwini y Gebru, 2018): error máximo de sistemas comerciales de clasificación de género a partir del rostro, del 0,8 % en hombres de piel clara a hasta el 34,7 % en mujeres de piel oscura.

Cuando una IA niega un crédito, selecciona un candidato o sentencia una condena, los sesgos no son un detalle: son injusticia automatizada.

2. Automatización sin humanidad

Automatizar procesos puede ser eficiente. Pero cuando sustituye el contacto humano en ámbitos sensibles —salud, educación, justicia, relaciones laborales—, corremos el riesgo de deshumanizar decisiones que exigen empatía y juicio ético.

Shoshana Zuboff, en The Age of Surveillance Capitalism (2019), advierte que la IA puede convertirse en una infraestructura de control psicológico, donde cada clic, pausa o mirada es un dato explotado sin consentimiento (Cap. 6, p. 121-143).

3. Dependencia cognitiva y pérdida de pensamiento crítico

Cuando delegamos decisiones o generación de ideas en IA, también corremos el riesgo de atrofiar nuestras habilidades cognitivas: analizar, escribir, resolver, investigar.

¿Aprenderán los estudiantes a pensar si sus ensayos los escribe una máquina?

Nicholas Carr ya lo advertía en The Shallows (2010): la tecnología no solo cambia lo que hacemos: cambia también quiénes somos —y cómo pensamos— cuando lo hacemos.

Un docente lo describe desde su aula, en uno de los ensayos reunidos por la UNESCO en The algorithm in the room. Una pregunta que antes hacía que su grupo formulara hipótesis quedó sin efecto el día en que la IA la respondió al instante: «AI has taken away the process in which understanding is born. They are parroting words that were never theirs.» (Novik, en UNESCO, 2026, p. 46). La IA se llevó el proceso en el que nace la comprensión, y sus estudiantes repetían palabras que nunca fueron suyas. Es el relato de un docente, no un estudio; pero cualquiera que enseñe lo reconoce.

El riesgo es real, y no es un destino. La postura de diseño de Carlos Miranda Levy, autor de este programa, lo plantea con una imagen: la inteligencia es como un músculo, crece con el uso y se consume sin él; la IA es un motor que se le puede acoplar para ahorrárselo o para fortalecerlo, como una bicicleta eléctrica, y la bicicleta no decide cuál de los dos. Los dos futuros, la atrofia y el gimnasio cognitivo, corren sobre la misma máquina; la diferencia está en cómo se diseña su uso. (Postura de diseño del autor, no un hallazgo de investigación.)

4. Riesgos para tu propio criterio profesional

Los riesgos anteriores se miran a escala de sociedad. Hay otros más cercanos: los que afectan tu propio juicio como educador. La OCDE, en su Teaching Compass (2025), los describe con imágenes de una brújula que pierde el norte. En paráfrasis:

ImagenQué ocurrePregunta para revisarte
La aguja que giraSin un propósito profesional claro, la última tendencia digital o herramienta de IA distrae más de lo que ayuda (OCDE, 2025, p. 15).¿Estoy usando esta herramienta porque sirve a lo que quiero que aprendan, o porque es la novedad?
La deriva del rumboCuando algoritmos opacos empiezan a dictar decisiones de enseñanza, quien educa corre el riesgo de ceder su agencia profesional (OCDE, 2025, p. 15).¿Qué decisión de esta semana tomó la herramienta por mí sin que yo la revisara?
La distorsión magnéticaHerramientas de IA entrenadas con datos imperfectos, adoptadas sin escrutinio crítico, pueden trasladar sus sesgos a la calificación, al acompañamiento y a las recomendaciones de enseñanza (OCDE, 2025, p. 16).¿He revisado qué sesgos podría estar trasladando a cómo evalúo o agrupo?

La OCDE presenta el Teaching Compass como un marco aspiracional, no como evidencia de efecto; estas imágenes sirven como lista de autocomprobación, no como diagnóstico.

Tres imágenes de una brújula que pierde el norte (OCDE, Teaching Compass, 2025, en paráfrasis), útiles como lista de autocomprobación, no como diagnóstico. La aguja que giraSin propósito claro, la novedad distraemás de lo que ayuda¿La uso porque sirve a lo que quiero queaprendan? N La deriva del rumboAlgoritmos opacos dictan decisiones ycedes tu agencia¿Qué decidió la herramienta por mí estasemana? N La distorsión magnéticaDatos imperfectos trasladan sus sesgos acalificar y agrupar¿Qué sesgos podría estar trasladando? N
Tres imágenes de una brújula que pierde el norte (OCDE, Teaching Compass, 2025, en paráfrasis), útiles como lista de autocomprobación, no como diagnóstico.

III. Límites de la IA: Lo que (aún) no puede hacer

1. La IA no comprende, solo predice

Los modelos de lenguaje como ChatGPT no «entienden» el contenido. Solo predicen estadísticamente la palabra más probable a continuación. Esto genera resultados coherentes en forma, pero no necesariamente en contenido.

Gary Marcus y Ernest Davis, en Rebooting AI (2019), insisten en que la IA actual tiene forma pero no fondo: estructura gramatical sin sentido común.

2. La IA no tiene conciencia ni intención

No hay emociones, valores ni responsabilidad moral en los sistemas de IA. Sus acciones pueden parecer humanas, pero no hay sujeto detrás.

Por eso, no pueden distinguir entre el bien y el mal, ni entender el impacto emocional o ético de sus acciones.

La OCDE nombra como riesgo emergente lo que llama «humanizar la IA»: atribuir comprensión o intención a sistemas estadísticos, y confiar en lo que la máquina produce por encima del propio instinto pedagógico (OCDE, Teaching Compass, 2025, p. 16, en paráfrasis).

3. Generalización limitada

La IA es excelente en tareas específicas, pero pobre al transferir conocimiento de un dominio a otro. Un sistema que traduce textos no sabe resolver ecuaciones. La famosa IA general (AGI), capaz de razonar como un humano, aún no existe (aunque Bubeck et al., 2023, en un preprint de investigadores de Microsoft no revisado por pares, sostienen que GPT-4 sería una versión «temprana e incompleta» de AGI, una lectura que se discute).

IV. Oportunidades de la IA: Cuando la tecnología amplifica lo humano

1. Personalización del aprendizaje

Con IA, se puede adaptar el contenido a las necesidades y ritmos de cada estudiante. La retroalimentación inmediata y el análisis de progreso permiten trayectorias personalizadas, difíciles de lograr en aulas masificadas.

El proyecto Khanmigo de Khan Academy, potenciado por GPT, ofrece tutorías personalizadas en matemáticas, lenguaje y ciencias a estudiantes y docentes en un número creciente de distritos escolares.

En Nigeria, seis semanas de sesiones guiadas después de clase con un asistente de IA generativa elevaron en 0,31 desviaciones estándar el resultado en una prueba alineada con el currículo de inglés; los mayores efectos fueron para las estudiantes y para quienes ya iban mejor (De Simone et al., 2025, Banco Mundial, Policy Research Working Paper 11125, documento de trabajo no revisado por pares). Ayudó más a quien ya iba adelante: la equidad no llega sola.

2. Apoyo en salud preventiva y diagnóstica

Sistemas como DeepMind Health han superado a radiólogos humanos en la detección temprana de cáncer de mama (Nature, 2020). La IA permite analizar miles de imágenes médicas en segundos, elevando la precisión y anticipación diagnóstica.

3. Automatización de tareas repetitivas

Desde corregir exámenes hasta transcribir reuniones o analizar contratos, la IA puede liberar tiempo humano para tareas que sí requieren empatía, juicio, creatividad o presencia emocional.

En el sector legal, Harvey AI, entrenada con el respaldo de OpenAI, ya asiste bufetes en la redacción y revisión de documentos, reduciendo tiempos sustancialmente.

4. Accesibilidad e inclusión

IA como ElevenLabs, Speechify o Be My Eyes permiten convertir texto en audio, describir imágenes a personas con discapacidad visual, o asistir en traducción en tiempo real, democratizando el acceso al conocimiento.

V. Tabla integradora de retos, riesgos, límites y oportunidades

CategoríaEjemplos claveImpacto
RetosRegulación ética, inclusión digital, alfabetización tecnológicaDificultad para gobernar una tecnología que avanza más rápido que la ley
RiesgosSesgos, vigilancia, deshumanización, dependencia cognitivaAmenazas a la privacidad, equidad y autonomía
LímitesFalta de comprensión, ausencia de conciencia, generalización deficienteImposibilidad de reemplazar razonamiento humano integral
OportunidadesPersonalización educativa, apoyo médico, automatización de tareas, accesibilidadAmpliación de capacidades humanas y mejora de calidad de vida

VI. Entonces, ¿cómo deberíamos actuar?

La IA no es buena ni mala. Es una herramienta amplificadora. Si se integra sin criterio, puede aumentar desigualdades, manipular decisiones o banalizar la educación. Pero si se guía con ética, conocimiento y propósito, puede liberar tiempo humano, aumentar la inclusión y mejorar la calidad de vida.

«La inteligencia artificial no es lo que va a decidir el futuro. Lo hará la inteligencia humana que decida cómo usarla.»

¿Y tú? ¿Desde dónde eliges observar la IA?

¿Desde el miedo a ser reemplazado? ¿Desde la fascinación tecnológica sin ética? ¿Desde la intención pedagógica, humana, crítica?

Haz una pausa. Mira a tu alrededor. ¿Qué decisiones sobre IA están tomando hoy en tu comunidad, tu escuela, tu empresa, tu familia?

Porque no basta con saber que la IA existe. Ahora toca decidir cómo convivir con ella sin perder lo que nos hace humanos.

Aprendizaje integral en IA diseñado para educadores, por educadores. De la concienciación a la maestría.