Curso 2 · Evaluación · Carlos Isaac Zainea

El curso se evalúa por productos, no por exámenes. Los tres productos y la bitácora son evidencias verificables de las cuatro competencias. Cada uno tiene una rúbrica de cuatro niveles. La nota final es la suma ponderada.

Producto	Peso	Competencias
Informe de corpus	40 %	1, 3, 4
Catálogo maestro y cuaderno reproducible	25 %	2, 3
Protocolo de corpus	20 %	1, 2
Bitácora semanal	15 %	1 a 4

Informe de corpus (40 %)

Criterio	Insuficiente	Básico	Logrado	Sobresaliente
Reconstruibilidad	Faltan documentos de la carpeta o el cuaderno no corre	La carpeta está completa pero reconstruir exige preguntarle al autor	Otro investigador puede reconstruir el corpus con el README, el protocolo y los cuadernos	Reconstruible y, además, el informe dice qué pasaría si una fuente cambiara y cómo detectarlo
Declaración de datos	Ausente o genérica	Presente, con preguntas sin respuesta	Completa: razón de la curaduría, variedad de lengua, productores, características, procedencia y derechos	Completa y situada: dice desde qué posición se tomó el corpus y qué lectura ajena cambiaría
Primera lectura computacional	Conteos sin lectura	Conteos con alguna línea leída	Cada instrumento con lo que sugiere y las líneas que se leyeron para decirlo	Además, muestra un caso en que el patrón sugería algo que el texto no sostuvo
Auditoría de la lectura asistida	Sin muestra a ciegas o sin cifra	Cifra sin tipología de desacuerdos	Tasa, kappa, tipología de desacuerdos y decisión razonada	Además, una segunda versión de la instrucción con su nueva auditoría
Registro de frontera	Confunde lo que propuso el modelo con lo decidido	Distingue en la mayoría de operaciones	Distingue en todas las operaciones, desde la propuesta de fuentes hasta las etiquetas, con criterio explícito	Además, discute un caso en que la distinción fue difícil
Lo que queda abierto	Ausente	Enumerado sin consecuencias	Enumerado con la consecuencia para la pregunta del proyecto	Además, dice qué documento ausente cambiaría más el corpus
Presentación	No responde la pregunta obligatoria	Responde con generalidades	Responde con el caso propio	Responde y reformula la pregunta de un par

Catálogo maestro y cuaderno reproducible (25 %)

Criterio	Insuficiente	Básico	Logrado	Sobresaliente
Esquema	Faltan campos obligatorios	Campos presentes con formatos inconsistentes	Los catorce campos con los formatos de la plantilla	Además, columnas propias justificadas en una nota
Procedencia	Piezas sin fuente, fecha o dirección	Procedencia en la mayoría de piezas	Procedencia completa en todas, con las dos fechas distinguidas	Además, bitácora de descarga enlazada por hash
Derechos y criterio	Vacíos o idénticos para todo	Presentes sin relación con el protocolo	Cada pieza con régimen de derechos y criterio de inclusión que existe en el protocolo	Además, las exclusiones conservan identificador y razón
Integridad	No se aplicaron reglas	Reglas aplicadas con fallas sin resolver	Las cinco reglas pasan	Las cinco reglas pasan y están en una función que se ejecuta en cada cambio
Reproducibilidad	El cuaderno no corre de arriba abajo	Corre con intervención manual no documentada	Regenera el catálogo desde `crudo` sin intervención; las decisiones a mano están en una tabla con fecha	Además, una segunda ejecución produce los mismos hash y el cuaderno lo comprueba

Protocolo de corpus (20 %)

Criterio	Insuficiente	Básico	Logrado	Sobresaliente
Delimitación	"Todo lo disponible sobre el tema"	Dimensiones nombradas sin razones	Tipo, periodo, productores y asunto con razones y con exclusiones escritas	Además, dice qué cambiaría del corpus si una dimensión se moviera
Criterios de Valles	Ausentes	Mencionados sin aplicar	Autenticidad, credibilidad, representatividad e interpretabilidad aplicados a cada fuente	Además, señala la fuente más débil en cada criterio y qué hará con ella
Fuentes y recolección	Fuentes sin forma de entrega ni método	Forma de entrega sin método ni ritmo	Cada fuente con forma de entrega, método, ritmo, robots.txt y términos	Además, alternativa escrita para lo que no se puede descargar
Derechos y ética	Sin régimen de derechos	Régimen genérico	Régimen por fuente y lista de lo que no se descarga con su razón	Además, plan de tratamiento para piezas con datos personales o decisión de excluirlas
Cuaderno de recolección	Ausente	Corre sobre el caso demostrativo pero no sobre una fuente propia	Corre sobre una fuente propia con bitácora, pausa e identificación	Además, la segunda ejecución compara hash con la primera

Bitácora semanal (15 %)

Criterio	Insuficiente	Básico	Logrado	Sobresaliente
Continuidad	Menos de cinco semanas	Cinco o seis semanas	Siete u ocho semanas	Ocho semanas con referencias cruzadas entre ellas
El cuaderno como registro	Código sin celdas de explicación	Explicaciones genéricas	Cada celda de código con la decisión que encarna, arriba	Además, las decisiones revertidas se conservan con fecha y razón
Uso del modelo	No declarado	Declarado sin detalle	Qué se pidió, qué respondió, qué se tomó y qué se descartó, con razones	Además, un sesgo del modelo detectado y documentado
Honestidad	Solo aciertos	Menciona dudas	Registra dudas, errores y pérdidas	Registra dudas, errores, pérdidas y cambios de opinión fechados

Política de integridad

El uso de modelos de lenguaje es obligatorio y declarado. Lo que se sanciona no es usarlos sino presentar como propio lo que no se puede sostener: una etiqueta sin auditoría presentada como lectura, una inclusión decidida por el modelo presentada como criterio del protocolo, un resumen citado como fuente. Eso es lo que Validación del razonamiento con IA en ciencias sociales, el curso de fundamentos del programa, llama un infortunio de autoridad epistémica: un acto con forma de aserción fundamentada por el que nadie puede responder. Una entrega con uso no declarado se devuelve para que el estudiante escriba el registro de frontera que faltaba.

Certificación

Aprueba quien obtiene al menos el nivel Logrado en el informe de corpus y en el catálogo maestro, y un promedio ponderado de 3,5 sobre 5,0. La microcredencial certifica las cuatro competencias del syllabus.