Capítulo 10 — Lectura y crítica de investigación | Posgrado Seguridad de OT, IoT y sistemas ciberfísicos

Aprendizaje gratuito y abierto para quienes desean proteger a las personas y la tecnología. No se necesita una cuenta para estudiar ni consultar las respuestas.

Mapa de la lección

Lección 10 publicada. Mapa, ejemplo, EX046.

flowchart TD
  N0["Resultados de aprendizaje"]
  N1["10.1 Elegir los artículos"]
  N2["10.2 Criticar el modelo de amenazas"]
  N3["10.3 Criticar el método y la evaluación"]
  N4["10.4 Traslado a la práctica"]
  N5["10.5 Escribir la crítica"]
  N6["Síntesis del capítulo"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6
  N6 --> EX["Ejemplo resuelto"]
  EX --> Q["Ejercicio EX046"]

Dibujo lógico

flowchart LR
  N0["Resultados de aprendizaje"]
  N1["10.1 Elegir los artículos"]
  N2["10.2 Criticar el modelo de amenazas"]
  N3["10.3 Criticar el método y la evaluación"]
  N4["10.4 Traslado a la práctica"]
  N5["10.5 Escribir la crítica"]
  N6["Síntesis del capítulo"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> Q["EX046"]

[Resultados de aprendizaje]
    |
    v
[10.1 Elegir los artículos]
    |
    v
[10.2 Criticar el modelo de amenazas]
    |
    v
[10.3 Criticar el método y la evaluación]
    |
    v
[10.4 Traslado a la práctica]
    |
    v
[10.5 Escribir la crítica]
    |
    v
[Síntesis del capítulo]
    |
    v
[Ejemplo resuelto] --> [Ejercicio EX046]

Resultados de aprendizaje

Usted será capaz de (1) criticar el modelo de amenazas, el método y la evaluación de un artículo revisado por pares sobre seguridad de TO; (2) juzgar si los resultados se trasladan a su organización; (3) sintetizar varios artículos; y (4) escribir una crítica estructurada que pueda usar un público de profesionales.

10.1 Elegir los artículos

Lea investigación primaria que aborde una decisión pendiente. Para el programa de detección de BWRP, dos artículos enmarcan el campo: Giraldo et al. (2018, ACM Computing Surveys, doi:10.1145/3203245), una revisión de la detección de ataques basada en la física en sistemas ciberfísicos, y Urbina et al. (2016, ACM CCS, doi:10.1145/2976749.2978388), que defiende evaluar los detectores por el impacto que puede lograr un atacante no detectado. Parta de una decisión que esté sobre la mesa, como la forma de evaluar el monitor de dosificación previsto en BWRP, y elija los artículos que guarden relación con ella. Una revisión da el mapa, y un artículo centrado en un problema da un método que probar. Anote por qué se eligió cada artículo, para poder revisar la lista de lecturas cuando cambie la decisión.

10.2 Criticar el modelo de amenazas

Pregunte qué puede observar, cambiar y saber el atacante. Urbina et al. consideran un atacante que conoce el detector y se mantiene por debajo de su umbral, una hipótesis fuerte pero realista para actores con muchos recursos. Un artículo que solo prueba ataques ingenuos exagera el valor del detector. Para BWRP, el atacante pertinente es uno que puede cambiar los valores de dosificación o las lecturas que informan de ellos. Escriba las capacidades de ese atacante en la crítica y compárelas con las del artículo. Si un artículo supone que el atacante no puede ver el detector, diga si eso es plausible para una ruta de acceso de proveedores que llega a PLC-D.

10.3 Criticar el método y la evaluación

Compruebe el banco de pruebas o el conjunto de datos (simulado, de laboratorio u operativo), las métricas, las referencias de comparación y si los umbrales se ajustaron con los datos de evaluación. Las revisiones como la de Giraldo et al. son especialmente útiles para detectar hábitos de todo el campo, por ejemplo métricas incoherentes que dificultan comparar artículos. Escriba qué mide realmente la evaluación de cada artículo y compárelo con lo que BWRP necesita saber. Un detector evaluado por su exactitud sobre datos equilibrados dice poco de las falsas alertas en una planta donde los ataques son raros. Anote también si los autores informan del impacto que podría lograr un atacante sin ser detectado, la medida que defienden Urbina et al.

10.4 Traslado a la práctica

Incluso un artículo sólido puede no trasladarse. La detección basada en la física necesita un modelo del proceso; el tratamiento biológico de BWRP es lento y no lineal, a diferencia de los lazos más rápidos de muchos bancos de pruebas. Para trasladarlo hay que preguntar: ¿tiene nuestro proceso la dinámica, los sensores y la calidad de datos que el método supone? Responda a cada pregunta con evidencia de BWRP: qué sensores hay en el lazo de dosificación, con qué frecuencia informan y cuánto ruido tienen las lecturas. Si las respuestas no alcanzan lo que el método necesita, el traslado puede requerir instrumentos nuevos o un modelo distinto. La crítica debe decir cuál de las dos cosas, en lugar de recomendar el método por la fuerza de sus resultados publicados.

10.5 Escribir la crítica

Estructura: pregunta y afirmación; modelo de amenazas; método; evidencia; traslado a BWRP; qué probaríamos primero. Manténgala en dos páginas para un público de profesionales. Cada parte debe ser breve y concreta. El párrafo sobre el traslado es el más importante para los profesionales, porque dice qué tendría que ser cierto en BWRP para que los resultados del artículo se apliquen. Termine con una prueba que la organización pueda ejecutar, como medir la desviación máxima de dosificación no detectada en su propia reproducción. Pida a un operador que la lea antes de difundirla.

Ejemplo resuelto (BWRP sintética)

La crítica de Daniel concluye: la métrica de impacto de Urbina et al. es la forma correcta de evaluar el monitor de dosificación de BWRP, porque el lazo de dosificación es donde un sesgo no detectado tiene consecuencias para la salud pública; los resultados de su banco de pruebas no se trasladan directamente, así que BWRP medirá la desviación máxima de dosificación no detectada en su propia reproducción antes de elegir los umbrales.

Caso sintético — Bayside Water Reclamation Plant. La crítica es una ilustración; los dos artículos son reales y sus DOI están verificados.

Errores y límites

Los resúmenes de artículos no son críticas. No atribuya a un artículo resultados que no presenta; cite textualmente y dé la referencia.

Ejercicios — capítulo 10

EX046 — La hipótesis del atacante sigiloso. ¿Por qué es razonable para BWRP suponer que el atacante conoce el detector?
Mostrar criterios de evaluación
Rúbrica: 3 = los actores capaces estudian sus objetivos; la documentación y los proveedores filtran información; diseño conservador; 2 = parcial; 1 = no es razonable; 0 = nada.
EX047 — Detectar el ajuste con los datos de prueba. ¿Qué frase de una sección de método mostraría que los umbrales se ajustaron con los datos de evaluación?
Mostrar criterios de evaluación
Rúbrica: 3 = umbrales elegidos para maximizar el rendimiento en el mismo conjunto de datos del que se informa; 2 = parcial; 1 = vago; 0 = nada.
EX048 — Pregunta de traslado para procesos lentos. Nombre una propiedad del proceso que limite el traslado de resultados de detección en lazos rápidos al tratamiento biológico.
Mostrar criterios de evaluación
Rúbrica: 3 = dinámica lenta y no lineal/constantes de tiempo largas o sensores escasos; 2 = vago; 1 = incorrecto; 0 = nada.
EX049 — Usar bien una revisión. Indique un uso adecuado y uno inadecuado de Giraldo et al.
Mostrar criterios de evaluación
Rúbrica: 3 = adecuado: cartografiar el campo y encontrar artículos primarios; inadecuado: citarlo como evidencia de que un detector concreto funciona; 2 = uno; 1 = vago; 0 = nada.
EX050 — La primera prueba. ¿Qué debería probar BWRP en primer lugar tras leer a Urbina et al.?
Mostrar criterios de evaluación
Rúbrica: 3 = desviación máxima de dosificación no detectada con los umbrales actuales en su reproducción; 2 = parcial; 1 = tasa de detección; 0 = nada.

Síntesis del capítulo

La crítica evalúa el modelo de amenazas, el método y el traslado, y después convierte un artículo en la primera prueba que su organización debería ejecutar.

Siga estudiando — capítulo 10 de 12

← Capítulo 09 (borrador) · Índice de capítulos del curso · Capítulo 11 (borrador) →