Carlos Isaac
Zainea Maya

Tunjos para la IA
Programa de cursos

Razonamiento, validación e inteligencia artificial en ciencias sociales y humanidades.

Curso 7 · Juicio · ocho sesiones · híbrido

Plantillas

Plantillas de los productos del curso.

Auditoría de exterioridad

Estudiante: Proyecto (una frase): Fecha: Modelo, versión y fecha de las consultas:

Para qué sirve esta auditoría

Mide lo que un modelo excluye al leer una muestra de material situado, comparando su lectura con la de una persona que participa en la forma de vida que produjo ese material. No produce una cifra sino un perfil: en qué tipo de piezas el modelo entiende mal, aplana o ignora, y qué regla se deriva para el protocolo. Es una propuesta del curso, no un estándar del campo, y por eso incluye una sección sobre lo que no pudo medir.

1. La muestra

Número de piezas (entre diez y veinte):

Criterio de selección (por carga cultural, no por representatividad). Qué hace que estas piezas dependan del contexto:

Qué exagera la muestra por construcción:

Verificación contra la matriz de riesgos: ninguna pieza clasificada como "no usar"; las que tienen datos personales salen anonimizadas o como descripción. Confirmo:

2. Lectores situados

Lector Relación con la comunidad que produjo el material Consentimiento informado (fecha) Puede retirarse de cualquier pieza Reconocimiento que eligió en el informe
1
2

3. Categorías locales escritas antes de consultar al modelo

Una o dos frases por pieza, escritas por el lector situado: qué es, qué hace en la vida de quien la produjo o la usa, qué palabra local la nombra. La fecha de escritura debe ser anterior a la de las consultas.

Pieza Descripción breve de la pieza Categoría local (lector situado) Fecha
1
2
3

4. Instrucción literal al modelo

Una instrucción fija para todas las piezas, que pide descripción y significado sin sugerir categorías. Si hubo variantes (lengua, con o sin contexto), cada una es una ronda y se registra aparte.

[instrucción literal]

Rondas realizadas (una fila por variante):

Ronda Variante Fecha
1

5. Contraste

Pieza Lectura del modelo (literal o resumen fiel) Tipo de exclusión (entendió mal, aplanó, ignoró) Qué dice el lector situado de la diferencia Corregible con contexto, con categorías locales, o límite
1
2
3

Si hubo dos lectores situados y discreparon, registre ambas lecturas y no las promedie:

6. Perfil de exclusiones

Tipo de exclusión Número de piezas Qué tienen en común las piezas de este tipo
Entendió mal
Aplanó
Ignoró
Sin diferencia relevante

Hipótesis sobre la precomprensión del modelo que el perfil sugiere:

Una pieza en que la clasificación fue dudosa, y por qué:

7. Regla derivada para el protocolo

En qué tipo de piezas la lectura del modelo no se acepta sin lector situado, y qué andamiaje lo garantiza:

8. Lo que no se pudo medir

Qué quedó fuera de la auditoría y por qué (sin lector situado para cierto tipo de pieza, muestra demasiado pequeña, material que no podía salir hacia el modelo, discrepancia sin resolver). Cómo podría medirse:

9. Declaración

Declaro que las categorías locales se escribieron antes de consultar al modelo, que el modelo no clasificó sus propias exclusiones, y que respondo por la clasificación y la regla derivada.

Firma y fecha:


Declaración de uso de IA

Acompaña cada producto del proyecto. Una página. Está escrita para alguien que no tomó el curso y que debe poder reconstruir, con ella en la mano, qué parte del producto es salida de un modelo y qué parte es afirmación del autor.

Producto al que acompaña (título, versión, fecha): Autor o autores que firman: Protocolo de gobernanza que rige (nombre y versión):

1. Qué modelos se usaron

Modelo o servicio Versión Plan y fecha de los términos de uso Fases del trabajo en que se usó

2. Para qué se usaron

Una fila por fase. La columna de instrucciones remite al registro de lecturas del protocolo.

Fase Qué se le pidió al modelo (instrucción resumida; literal en el registro) Qué material salió hacia él Bajo qué condiciones (anonimizado, descripción, sin datos personales)

3. Qué se aceptó, qué se corrigió, qué se rechazó

Fase Salidas aceptadas sin cambios Salidas corregidas (y quién) Salidas rechazadas (y razón; detalle en el registro de rechazos)

4. Dónde está la frontera en este producto

Qué partes del producto son aserciones del autor y qué partes reproducen o resumen salidas del modelo. Si una categoría, una síntesis o una cita fue propuesta por el modelo y aceptada, decirlo aquí.

5. Qué no se pudo verificar

Salidas del modelo que entraron en el producto sin verificación completa, y por qué:

6. Exterioridad

Qué tipos de pieza, según la auditoría del proyecto, no se aceptaron sin lector situado, y quién fue el lector situado para este producto:

7. Material y derechos

Confirmación de que ninguna pieza clasificada como "no usar" en la matriz de riesgos entró en el producto ni salió hacia un modelo, y de que las piezas con datos personales se trataron según la matriz:

8. Quién responde

Nombre, cargo o relación con el proyecto, y contacto de la persona que responde por las afirmaciones de este producto ante la comunidad del material y ante sus lectores:

Firma y fecha:


Matriz de riesgos y derechos

Estudiante: Proyecto (una frase): Fecha: Modelo o servicio de modelos que se usa, versión y plan:

Para qué sirve esta matriz

No es un párrafo de consideraciones éticas. Es el primer documento del protocolo de gobernanza: dice, para cada tipo de pieza del corpus, qué derechos pesan sobre ella, qué daño puede causar su uso, a quién, con qué probabilidad y qué se hace para evitarlo. Una matriz bien hecha pone cada riesgo a nombre de alguien.

1. Tipos de pieza del corpus

Entre tres y seis tipos. Un tipo agrupa piezas con el mismo origen y el mismo régimen de derechos (por ejemplo: entrevistas propias, fotografías de prensa, publicaciones en una red social, documentos institucionales, imágenes de archivo).

Nº Tipo de pieza Cuántas Origen Finalidad con que se produjeron
1
2
3

2. Derechos por tipo en la semana 2

Nº Autor o titular de derechos ¿Datos personales? ¿Sensibles? (Ley 1581, arts. 3 y 5) Norma o cláusula que aplica (Ley 23 art. 31 o 32; Ley 1581; términos de la plataforma) Uso que decido (citar, describir, exhibir con reserva, no usar) Por qué
1
2
3

3. Riesgos por tipo en la semana 3

Ninguna celda de daño puede decir "ninguno". Cada daño lleva un verbo y un afectado. Al menos un daño de la matriz debe tener probabilidad alta, o explicar por qué ninguno la tiene.

Nº Daño posible A quién (grupo o persona) Probabilidad (baja, media, alta) y por qué Mitigación Qué pierde el análisis con la mitigación
1
2
3

4. Términos de uso del servicio de modelos

Cláusula sobre conservación de datos (copiada literal):

Cláusula sobre uso para entrenamiento (copiada literal):

Fecha de consulta y versión de los términos:

Si no encontró ninguna cláusula, qué asumió:

Decisión derivada (qué sale hacia el servicio, qué sale anonimizado, qué no sale):

Qué hacer cuando la cláusula cambie:

5. Anonimización cuando aplica

Tipo de pieza Técnica (suprimir, seudonimizar, generalizar) Qué se quitó Qué se perdió para el análisis Quién guarda la tabla de correspondencia

6. El daño que faltaba

Tras el intercambio con un par en la semana 3, el daño que el par encontró y usted no había visto, y a quién afecta:

7. Sobre el modelo

Qué daños propuso el modelo:

Cuáles eran genéricos (aplicarían a cualquier corpus) y cuáles propios de este material:

Qué derecho aplicó mal (autoría donde había datos personales, o al revés):

8. Declaración

Declaro que esta matriz es mi decisión. Donde usé un modelo lo he indicado arriba, y respondo por la clasificación de derechos, la estimación de riesgos y las mitigaciones que aquí propongo.

Firma y fecha:


Protocolo de gobernanza epistémica

Autor o autores: Versión: preliminar (semana 7) / final (semana 8) Fecha:

1. Alcance

Para quién rige (proyecto, equipo o institución):

Material cubierto (tipos de pieza, según la matriz de riesgos):

Modelos y servicios cubiertos (nombre, versión, plan, fecha de los términos de uso):

Vigencia y cláusula de revisión (cuándo se revisa, quién lo hace, qué dispara una revisión anticipada: cambio de versión del modelo, cambio de términos de uso, nuevo tipo de material):

2. Qué gobierna este protocolo

Una frase que diga qué cuenta como afirmación válida en este proyecto y quién responde por ella. Lo demás (seguridad, uso de herramientas) es medio para eso.

3. Roles

Cuatro roles. Una persona puede ocupar varios si lo declara y dice qué se pierde. La separación entre quien produce y quien revisa es la regla que hace a los roles algo más que nombres.

Rol Qué hace Persona (nombre y cargo o relación con el proyecto) Si una persona ocupa varios roles, qué se pierde
Decide qué sale Decide qué material sale hacia un modelo y bajo qué condiciones, con la matriz de riesgos
Revisa Contrasta las lecturas del modelo con el perfil de exclusiones y los registros, sin haberlas producido
Lector situado Lee las piezas que la auditoría marcó, antes que el modelo
Firma y responde Firma el producto y responde ante la comunidad del corpus y ante los lectores

4. Registros

Registro Qué contiene Quién lo lleva Dónde está Quién puede leerlo
Matriz de riesgos y cláusulas La matriz vigente y las cláusulas de términos de uso copiadas con fecha
Lecturas del modelo Instrucción literal, modelo, versión, fecha, salida literal, para cada consulta que entra en un producto
Rechazos Cada lectura rechazada o corregida, con la razón y quién decidió

5. Reglas

Al menos seis. Cada regla tiene verbo, rol, registro y condición de rechazo. Una regla sin riesgo que la motive es un principio, no una regla.

Nº Regla (qué se hace, con verbo) Riesgo de la matriz o exclusión del perfil que la motiva Rol que la ejecuta Registro donde se verifica Condición en que un resultado se rechaza Norma que la respalda, si la hay
1
2
3
4
5
6

6. Andamiaje que preserva el juicio en la semana 6

Condición Cómo se cumple en este protocolo Qué cuesta (tiempo, personas) Quién lo paga
Muestra ejecutada a mano en cada ciclo
Lectura propia escrita antes de ver la del modelo, en las piezas marcadas por la auditoría
Registro de rechazos con razón
Revisión entre pares sin modelo
Una fase que nunca se delega

7. Declaración de uso de IA

Cada producto del proyecto lleva una declaración de uso con la plantilla declaracion-de-uso-de-ia.md. Quién la redacta, quién la firma y dónde se archiva:

8. Riesgos que este protocolo decide no cubrir

Qué riesgos de la matriz quedan sin regla, y por qué (fuera del alcance, costo desproporcionado, cubiertos por otra política):

9. Dónde exige más que la norma y dónde menos

Qué obligaciones de las normas leídas (CONPES 4144, Sentencia T-067, Directiva Conjunta 007, Ley 1581) adopta aunque no obliguen al proyecto, y en qué punto el protocolo exige menos que ellas y por qué:

10. Solo en la versión final

Objeciones recibidas en la revisión entre pares y qué regla cambió por cada una:

Una objeción que decidí no incorporar, y por qué:

Ante quién sigue siendo menos defensible este protocolo (la comunidad del corpus o los lectores), y qué haría falta:

Cómo se repetirá la revisión externa después del curso (con quién, cuándo):

11. Declaración

Declaro que este protocolo es ejecutable por una persona distinta de su autor, que los roles tienen persona, que los registros existen, y que respondo por las reglas que aquí propongo.

Firma y fecha: