OpenCyber Academy
Grado · Capítulo 39 · Español
Código del curso: OCA-114Capítulo 39: OCA-114-C039

Capítulo 39 — Evaluación del proyecto final

Aprendizaje gratuito y abierto para quienes desean proteger a las personas y la tecnología. No se necesita una cuenta para estudiar ni consultar las respuestas.

Mapa de la lección

Lección 39 publicada. Mapa, ejemplo, EX115.

flowchart TD
  N0["Resultados de aprendizaje"]
  N1["39.1 Frente a la propuesta"]
  N2["39.2 Resultados frente a interpretación"]
  N3["39.3 Rúbrica de autoevaluación"]
  N4["39.4 Plan para quien le suceda"]
  N5["39.5 La visión del supervisor"]
  N6["Síntesis del capítulo"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6
  N6 --> EX["Ejemplo resuelto"]
  EX --> Q["Ejercicio EX115"]

Dibujo lógico

flowchart LR
  N0["Resultados de aprendizaje"]
  N1["39.1 Frente a la propuesta"]
  N2["39.2 Resultados frente a interpretación"]
  N3["39.3 Rúbrica de autoevaluación"]
  N4["39.4 Plan para quien le suceda"]
  N5["39.5 La visión del supervisor"]
  N6["Síntesis del capítulo"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> Q["EX115"]

[Resultados de aprendizaje]
    |
    v
[39.1 Frente a la propuesta]
    |
    v
[39.2 Resultados frente a interpretación]
    |
    v
[39.3 Rúbrica de autoevaluación]
    |
    v
[39.4 Plan para quien le suceda]
    |
    v
[39.5 La visión del supervisor]
    |
    v
[Síntesis del capítulo]
    |
    v
[Ejemplo resuelto] --> [Ejercicio EX115]

Resultados de aprendizaje

Usted podrá (1) evaluar un proyecto final frente a su propia propuesta; (2) separar resultados, interpretación y limitaciones; (3) realizar una autoevaluación estructurada con la rúbrica del curso; y (4) planificar el trabajo que necesitaría hacer quien le suceda.

39.1 Frente a la propuesta

Vuelva a los criterios de aceptación escritos en el capítulo 35. Para cada uno, registre cumplido, cumplido en parte o no cumplido, con evidencia. Un proyecto final que no cumple un criterio pero explica por qué —por ejemplo, que la clase de deriva no podía detectarse solo con reglas— todavía puede obtener una calificación alta. La tabla de evaluación de Maya muestra en uso los tres resultados posibles. Los criterios 1 y 2 se cumplen, con la matriz de confusión y los denominadores como evidencia, mientras que el criterio 3 se cumple en parte: cinco de seis clases de ataque tras la regla de cambio acumulado, con la escritura interna originada en el HMI todavía sin detectar y el motivo enunciado.

39.2 Resultados frente a interpretación

Los resultados son lo que produjo la evaluación: «exhaustividad de 4/5 en el conjunto de ocho casos». La interpretación es lo que usted cree que significa: «la regla de cambio acumulado aborda la manipulación lenta». Las limitaciones acotan la interpretación: «probado solo con datos sintéticos y un único perfil de deriva». Mantener tres encabezados impide que los resultados absorban en silencio las opiniones. En la tesis de Maya, la exhaustividad subió a 4/5 en el conjunto de ocho casos cuando la regla de cambio acumulado detectó el ataque de deriva; la escritura desde HMI-1 sigue sin detectarse. Esa frase es un resultado. «El monitor es adecuado para LDHP» sería una interpretación que la limitación, un único perfil de deriva con datos sintéticos, todavía no respalda.

39.3 Rúbrica de autoevaluación

Puntúese de 0 a 3 en: planteamiento del problema, adecuación del método, calidad de la evidencia, seguridad y ética, comunicación. Escriba una frase de evidencia por cada puntuación. Los supervisores usan la misma rúbrica; las diferencias abren una conversación útil. Maya se puntuó con un 2 en calidad de la evidencia, con la frase «ocho casos son un conjunto de juguete», y con un 3 en seguridad y ética, con «solo sin conexión, documentado». Los resultados resueltos explican por qué un 2 y no un 3 es justo: el análisis es reproducible y comunica los denominadores, pero ocho casos sintéticos con un único perfil de deriva no pueden respaldar afirmaciones generales. Una autopuntuación de 3 en ese punto habría sido el primer motivo de desacuerdo con su supervisor.

39.4 Plan para quien le suceda

Enumere lo que haría con tres meses más: un segundo modelo de proceso, capturas reales anonimizadas (proporcionadas por un propietario), un estudio de usabilidad con operadores. Ordénelo por su valor para la pregunta. Para Maya, la clasificación pone en primer lugar la escritura originada en el HMI, porque es la clase que su monitor sigue sin detectar: correlacionar las escrituras con los inicios de sesión de los operadores, sobre capturas anonimizadas proporcionadas por un propietario, pondría a prueba el remedio. Un segundo modelo de proceso, como el vaso de expansión del capítulo 21, viene después, ya que un monitor ajustado a un lazo puede no trasladarse a otro. Un estudio de usabilidad con operadores va al final, porque solo importa cuando el monitor ya detecta las clases que importan.

Ejemplo resuelto (LDHP sintética)

Tabla de evaluación de Maya: criterio 1 (procesa el conjunto de 8 casos, informa de la matriz de confusión): cumplido; criterio 2 (precisión y exhaustividad con denominadores): cumplido; criterio 3 (detecta las seis clases de ataque): cumplido en parte, cinco de seis tras la regla de cambio acumulado, con la escritura interna originada en el HMI todavía sin detectar. Autoevaluación: calidad de la evidencia 2 («ocho casos son un conjunto de juguete»), seguridad 3 («solo sin conexión, documentado»).

Caso sintético — Lakeside District Heating Plant. Las puntuaciones son una ilustración resuelta.

39.5 La visión del supervisor

Los supervisores buscan la coherencia entre la pregunta, la evidencia y las afirmaciones. Un comentario frecuente en esta etapa es que la sección de conclusiones repite los resultados en lugar de responder a la pregunta de investigación. Reescriba la conclusión para que su primera frase responda directamente a la pregunta del capítulo 35, la segunda enuncie la limitación más importante y la tercera nombre el siguiente estudio. La primera frase de Maya respondería directamente a la pregunta de su propuesta: con capturas sintéticas de LDHP, el monitor basado en reglas clasificó correctamente cinco de seis clases de ataque.

Errores y límites

La autoevaluación tiende a puntuar de más la comunicación y de menos la adecuación del método. No redefina los criterios de aceptación a posteriori para que se ajusten a los resultados.

Ejercicios — capítulo 39

Síntesis del capítulo

Evalúe un proyecto final frente a sus propias promesas, mantenga los resultados separados de las opiniones y deje un camino ordenado para quien continúe el trabajo.

Siga estudiando — capítulo 39 de 40

← Capítulo 38 (borrador) · Índice de capítulos del curso · Capítulo 40 (borrador) →

Respuestas desarrolladas

EX115. (a) Resultado. (b) Interpretación, y una que va más allá de esta evidencia. (c) Limitación.

EX116. El análisis es reproducible, usa las métricas correctas y comunica los denominadores, pero ocho casos sintéticos con un único perfil de deriva no pueden respaldar afirmaciones generales, así que la evidencia es sólida pero estrecha: un 2 y no un 3.

EX117. Probar con un segundo modelo de proceso construido de forma independiente (o con capturas anonimizadas proporcionadas por un propietario mediante un acuerdo), porque la principal pregunta abierta es si el conjunto de reglas se generaliza más allá de la planta para la que se diseñó.