· Redes · DevOps
Caída de Facebook (2021): el día que se borró del mapa de internet
4 de octubre de 2021. Facebook, Instagram y WhatsApp desaparecen a la vez durante unas seis horas.
Un comando de mantenimiento desconecta toda su red troncal, el revisor que debía frenarlo tenía un fallo y sus servidores DNS, al no ver los centros de datos, retiran su ruta BGP.
Internet deja de saber dónde está Facebook… y sus propias herramientas para arreglarlo dependían de esa misma red.
How do you prevent it? In three layers
- 1
Prueba el freno
Lanza a propósito comandos peligrosos contra tu revisor en los tests y comprueba que los bloquea. Si no se prueba, no existe.
- 2
Una puerta de atrás de verdad
Una red de administración aparte (fuera de banda: consola serie, 4G), con su propia conexión, que no pase por la red que puede caerse.
- 3
Rompe los círculos
Lo que necesitas para arreglar algo (acceso, chat, tarjetas, herramientas) no puede depender de lo que se ha roto.
Si para arreglar tu red necesitas tu red, no tienes plan B.
Sources
- Meta Engineering, postmortem (5-10-2021)
- Cloudflare, análisis (4-10-2021)
- BBC
- The New York Times
Recreaciones rotuladas en el vídeo. Las tres capas son recomendaciones, no hechos del caso.
Watch the video on Instagram ↗