<div dir="ltr"><br><div>En Google existe el "Blameless culture", sin eso seria imposible hacer cambios y mejoras en la infraestructura. Este es un artículo interesante acerca de esto:</div><div><br></div><div><a href="https://landing.google.com/sre/sre-book/chapters/postmortem-culture/">https://landing.google.com/sre/sre-book/chapters/postmortem-culture/</a><br></div><div><br></div><div>Saludos</div><div>as</div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Sep 1, 2020 at 4:27 PM Nicolas Antoniello <<a href="mailto:nantoniello@gmail.com">nantoniello@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">+1<br><div>Si las cosas no se "rompieran" o no cometamos errores alguna vez, quienes trabajamos en Operaciones alguna vez, no tendríamos trabajo... justamente de eso se trata operaciones: de estar al atento, de resolver problemas y de operar equipos (o como decimos en UY: meter mano). Equivocarse no es malo, se aprende mucho de los errores y bueno, tenemos la "suerte" (frente a otras disciplinas) de que aún hoy donde muchas cosas dependen de la conectividad de red, el impacto sobre sistemas de soporte de vida es bastante menor (comparado con otras disciplinas claro está).<br>Entonces, descartando intencionalidad, estas cosas siempre van a suceder y lo bueno es aprender de ellas entre todos y hacer los sistemas y las redes más resilientes a estos acontecimientos (que en un futuro relativamente cercano seguramente tendrán un impacto mucho mayor en la seguridad y en la vida de las personas que el que ya poseen).</div><div>En gran medida, para eso fue creado este espacio de LACNOG.</div><div><br></div><div>Por ejemplo, a partir de estas cosas, sería deseable que muchos desarrolladores y fabricantes de sistemas de automatización de provisioning, deployment de configuraciones y de seguridad, puedan mejorar sus sistemas introduciendo chequeos adicionales antes de aplicar políticas de filtrado (por ejemplo), de forma que estos mecanismos "protejan" a la red de probables afectaciones (imagino aplicaciones de IA o de Aprendizaje Automático ede ayuda a operaciones, para este tipo de chequeos automatizados y que sean capaces de advertir al operador que cierta configuración podría causar un potencial problema a la red).</div><div><br></div><div>Fraterno saludo,</div><div>Nico</div><div><br></div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">El mar., 1 de sep. de 2020 a la(s) 10:24, Tomas Lynch (<a href="mailto:tomas.lynch@gmail.com" target="_blank">tomas.lynch@gmail.com</a>) escribió:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_default" style="font-family:monospace,monospace">Todo el que haya operado u opere una red y que tenga a todos los clientes llamando porque no les funciona nada sumado a los jefes preguntando si ya esta reparada, sabrá que muchas veces solamente podemos conjeturar lo que salió mal: un bug cuando recibió un /125, un RR que cambió el next hop, uy mientras estaba configurando el BGP a las 7AM de un domingo borré la lista de acceso del ssh y eso hizo disparar una alarma de syslog que llenó el disco rígido, etc.</div><div class="gmail_default" style="font-family:monospace,monospace"><br></div><div class="gmail_default" style="font-family:monospace,monospace">Seguramente ahora en CenturyLink estarán buscando la cabeza de alguien en Juniper o en CloudFLare, los de CloudFlare en en un open source que bajaron de GitHub, los de Juniper en el que hace sus chips. Y todos deben estar analizando los logs que quedaron luego de reparar la red (si es que existen) y no creo que lleguen a una conclusión certera.</div><div class="gmail_default" style="font-family:monospace,monospace"><br></div><div class="gmail_default" style="font-family:monospace,monospace">Yo personalmente tuve problemas con flowspec en un router Juniper donde el rdp dejó de funcionar cuando reseteamos la sesión de flowspec. No tenemos la escala de AS3359 el corte pasó desapercibido por suerte.</div><div class="gmail_default" style="font-family:monospace,monospace"><br></div><div class="gmail_default" style="font-family:monospace,monospace">Estas cosas pasan en las redes IP y seguirán pasando. ¿Se podría haber evitado? Con el diario de ayer seguramente.</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Mon, Aug 31, 2020 at 6:22 PM Demian Pecile <<a href="mailto:dpecile@sietecapas.com.ar" target="_blank">dpecile@sietecapas.com.ar</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">



<div dir="auto">
Es un análisis post Morten de lo de ayer digamos.
<div><br>
</div>
<div>Saludos <br>
<br>
<div dir="ltr">
<div><span style="background-color:rgba(255,255,255,0)">--</span></div>
<div><span style="background-color:rgba(255,255,255,0)">Demian Pecile</span></div>
<div><span style="background-color:rgba(255,255,255,0)">Siete Capas S.R.L.</span></div>
<div><span style="background-color:rgba(255,255,255,0)">Periodistas Neuquinos 136</span></div>
<div><span style="background-color:rgba(255,255,255,0)">Piso 4 - Dpto. A - 8300 Neuquen</span></div>
<div><span style="background-color:rgba(255,255,255,0)">Argentina</span></div>
<div><span style="background-color:rgba(255,255,255,0)">Tel <a href="tel:+54-299-4479172" dir="ltr" target="_blank">+54-299-4479172</a> </span></div>
<div><span style="background-color:rgba(255,255,255,0)">Cel. <a href="tel:+549-299-5833500" dir="ltr" target="_blank">+549-299-5833500</a></span></div>
</div>
<div dir="ltr"><br>
<blockquote type="cite">El ago. 31, 2020, a la(s) 19:20, "<a href="mailto:ivancastro@xisp.cl" target="_blank">ivancastro@xisp.cl</a>" <<a href="mailto:ivancastro@xisp.cl" target="_blank">ivancastro@xisp.cl</a>> escribió:<br>
<br>
</blockquote>
</div>
<blockquote type="cite">
<div dir="ltr">
<div dir="auto">Hola buenas tardes,
<div dir="auto"><br>
</div>
<div dir="auto">Esto es continuación del problema de ayer? U hoy se presentó nuevamente?</div>
<div dir="auto"><br>
</div>
<div dir="auto">Saludos a todos</div>
<div dir="auto"><br>
</div>
<div dir="auto">Iván Castro</div>
<div dir="auto">As266881</div>
</div>
<div class="gmail_extra"><br>
<div class="gmail_quote">El 31 ago 2020 17:45, Hernan Moguilevsky <<a href="mailto:noc.hernan@gmail.com" target="_blank">noc.hernan@gmail.com</a>> escribió:<br type="attribution">
<blockquote style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr">
<div dir="ltr">
<div dir="ltr">
<div>Hola,</div>
<div><br>
</div>
<div>Un problema con una regla de Flowspec por lo que comunicó Century.</div>
<div><br>
</div>
<div>Alguna info y especulaciones aca:</div>
<div><a href="https://blog.cloudflare.com/analysis-of-todays-centurylink-level-3-outage/" target="_blank">https://blog.cloudflare.com/analysis-of-todays-centurylink-level-3-outage/</a></div>
<div><br>
</div>
<div>El mayor problema fue que continuaron anunciando prefijos de clientes que habían bajado sus sesiones (o estaban inestables).</div>
<div><br>
</div>
<div>Saludos.<br>
</div>
<div><br>
</div>
<div>
<div>
<div>
<div dir="ltr">
<div dir="ltr">HM<br>
</div>
</div>
</div>
<br>
</div>
</div>
</div>
</div>
</div>
<br>
<div>
<div dir="ltr">El lun., 31 de ago. de 2020 a la(s) 17:29, Hernan Arcidiacono (<a href="mailto:harcidiacono@iplan.com.ar" target="_blank">harcidiacono@iplan.com.ar</a>) escribió:<br>
</div>
<blockquote style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr">Buenas, alguien tiene mejor info de que paso? Adjunto artículo pero ahi nada en concreto.
<div><br>
</div>
<div><a href="https://www.sdxcentral.com/articles/news/centurylink-blamed-for-massive-cloudflare-outage/2020/08/?utm_campaign=website&utm_source=sendgrid&utm_medium=email" target="_blank">https://www.sdxcentral.com/articles/news/centurylink-blamed-for-massive-cloudflare-outage/2020/08/?utm_campaign=website&utm_source=sendgrid&utm_medium=email</a> </div>
<div> <br clear="all">
<div>
<div dir="ltr">
<div dir="ltr">
<div>
<div dir="ltr">
<div>
<div dir="ltr">
<div>
<div dir="ltr"><strong style="font-size:11px;line-height:16px;font-family:arial,helvetica,sans-serif;color:rgb(255,0,0)">HERNÁN ARCIDIÁCONO </strong><br style="color:rgb(83,83,83);font-family:arial,verdana,tahoma,helvetica,sans-serif;font-size:11px;line-height:16px">
<font face="arial, helvetica, sans-serif" color="#535353"><span style="font-size:11px;line-height:16px">CTO</span></font><br style="color:rgb(83,83,83);font-family:arial,verdana,tahoma,helvetica,sans-serif;font-size:11px;line-height:16px">
<span style="color:rgb(83,83,83);font-family:arial,verdana,tahoma,helvetica,sans-serif;font-size:11px;line-height:16px">Reconquista 865, CABA</span></div>
<div dir="ltr"><span style="color:rgb(83,83,83);font-family:arial,verdana,tahoma,helvetica,sans-serif;font-size:11px;line-height:16px">Directo: 54-11-5031-6411</span><br style="color:rgb(83,83,83);font-family:arial,verdana,tahoma,helvetica,sans-serif;font-size:11px;line-height:16px">
<span style="color:rgb(83,83,83);font-size:11px;line-height:16px;font-family:arial,helvetica,sans-serif"><strong style="color:rgb(255,0,0)">IPLAN</strong> | </span><a href="http://www.iplan.com.ar/" style="color:rgb(83,83,83);font-family:arial,verdana,tahoma,helvetica,sans-serif;font-size:11px;line-height:16px" target="_blank">iplan.com.ar</a><br>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<br>
</div>
</div>
<br>
<div>
<div dir="ltr">On Sun, Aug 30, 2020 at 10:38 AM Tecnología <a href="http://CHARNE.NET" target="_blank">
CHARNE.NET</a> <<a href="mailto:tecno@charne.net" target="_blank">tecno@charne.net</a>> wrote:<br>
</div>
<blockquote style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div>
<p><font size="-1">Hola, Tomás. Desde las 9, más o menos, en el chat de los técnicos de CABASE se está conversando el problema que afecta a América (ellos y nosotros) y Europa.</font></p>
<p><font size="-1">En concreto, nosotos vemos problema en el tráfico internacional y -por ende- cualquier recurso que tengas sobre AWS, servers de Fortnite, y esas cosas...<br>
</font></p>
<p><font size="-1">Saludos!</font></p>
<p><font size="-1"><br>
</font></p>
<p><font size="-1"><img alt=""></font></p>
<div>El 30/8/20 a las 10:23, Tomas Lynch escribió:<br>
</div>
<blockquote>
<div dir="ltr">
<div style="font-family:monospace,monospace">Estimados,</div>
<div style="font-family:monospace,monospace"><br>
</div>
<div style="font-family:monospace,monospace">En distintos lugares del planeta se están teniendo problemas con Level3/CenturyLink (AS3356). El problema parece ser una mala configuración de RRs. ¿Alguien está experimentado eso?</div>
<div style="font-family:monospace,monospace"><br>
</div>
<div style="font-family:monospace,monospace">Nuestras sesiones suben y bajan cada 2 minutos.</div>
<div style="font-family:monospace,monospace"><br>
</div>
<div style="font-family:monospace,monospace">Tomas Lynch</div>
</div>
<br>
<fieldset></fieldset>
<pre>_______________________________________________
LACNOG mailing list
<a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a>
<a href="https://mail.lacnic.net/mailman/listinfo/lacnog" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a>
Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a>
</pre>
</blockquote>
</div>
_______________________________________________<br>
LACNOG mailing list<br>
<a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a><br>
<a href="https://mail.lacnic.net/mailman/listinfo/lacnog" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a><br>
Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a><br>
</blockquote>
</div>
<br>
<pre style="font-size:1.3em;white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new";color:rgb(34,34,34);background-color:rgb(255,255,255)"><pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new""><pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new""><hr><pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new""><span style="font-family:arial,helvetica,sans-serif"><font size="2"><b>No Imprimas Digitalizá</b></font></span></pre></pre><pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new""><hr></pre></pre></pre>
<pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new";color:rgb(34,34,34);background-color:rgb(255,255,255)"><font size="1"><span style="background-color:rgb(255,255,204)">ESTE</span> <span style="background-color:rgb(255,255,204)">MENSAJE</span> <span style="background-color:rgb(255,255,204)">ES</span> <span style="background-color:rgb(255,255,204)">CONFIDENCIAL</span>. Puede contener información amparada por el secreto profesional. Si usted ha recibido <span style="background-color:rgb(255,255,204)">este</span> e-mail por error, por favor comuníquenoslo inmediatamente vía e-mail y tenga la amabilidad de eliminarlo de su sistema; no deberá copiar el <span style="background-color:rgb(255,255,204)">mensaje</span> ni divulgar su contenido a ninguna persona. Muchas gracias.

THIS MESSAGE IS <span style="background-color:rgb(255,255,204)">CONFIDENTIAL</span>. It may also contain information that is privileged or otherwise legally exempt from disclosure. If you have received it by mistake please let us know by e-mail immediately and delete it from your system; should also not copy the message nor disclose its contents to anyone. Many thanks.</font></pre>
<pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new";color:rgb(34,34,34);background-color:rgb(255,255,255)"><font size="1"><br></font></pre>
<pre style="white-space:pre-wrap;margin:0cm 0cm 0.0001pt;font-family:"courier new";color:rgb(34,34,34);background-color:rgb(255,255,255)"><p style="margin:0px 0px 0pt;color:rgb(80,0,80);font-style:normal;font-weight:400;letter-spacing:normal;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif">NSS S.A. – IPLAN | CUIT: 30-70265297-5 | IVA Responsable Inscripto | Ingr. Brutos: 901-033512-0 Inscripción I.G.J.: 24/02/1999, N° 2588, libro 4, tomo - Sociedades por Acciones | Sede Social: <a href="https://maps.google.com/?q=Reconquista+865+2%C2%B0+Piso,+CABA&entry=gmail&source=g" style="color:rgb(17,85,204)" target="_blank">Reconquista 865 2° Piso, CABA</a> C1003ABQ</font></span></p><p style="margin:0px 0px 0pt;color:rgb(80,0,80);font-style:normal;font-weight:400;letter-spacing:normal;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif"> </font></span></p><p style="margin:0px 0px 0pt;color:rgb(80,0,80);font-style:normal;font-weight:400;letter-spacing:normal;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif">Ley 25326 - art.27. - inc. 3. El titular podrá en cualquier momento solicitar el retiro o bloqueo de su nombre de los bancos de datos a los que se refiere el presente artículo.</font></span></p><p style="margin:0px 0px 0pt;color:rgb(80,0,80);font-style:normal;font-weight:400;letter-spacing:normal;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif"><br>Decreto 1558/01 - art. 27. - 3er. párrafo. En toda comunicación con fines de publicidad que se realice por correo, teléfono, correo electrónico, Internet u otro medio a distancia a conocer, se deberá indicar, en forma expresa y destacada, la posibilidad del titular del dato de solicitar el retiro o bloqueo, total o parcial, de su nombre de la base de datos. A pedido del interesado, se deberá informar el nombre del responsable o usuario del banco de datos que proveyó la información.</font></span></p><p style="margin:0px 0px 0pt;color:rgb(80,0,80);font-style:normal;font-weight:400;letter-spacing:normal;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif"> </font></span></p><p style="margin:0px 0px 0pt;color:rgb(80,0,80);font-style:normal;font-weight:400;letter-spacing:normal;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif">El titular de los datos personales tiene la facultad de ejercer el derecho de acceso a los mismos en forma gratuita y a intervalos no inferiores a 6 meses, salvo que se acredite un interés legítimo al efecto conforme lo establecido por el artículo 14, inciso 3 de la ley 25326.-</font></span></p><p style="margin:0px 0px 0.0001pt;font-family:arial,sans-serif;font-size:12.8px;white-space:normal;text-align:justify;line-height:normal"><span style="color:rgb(80,0,80);font-size:12.8px"></span></p><p style="margin:0px 0px 0pt;font-family:arial,sans-serif;font-size:12.8px;white-space:normal;color:rgb(80,0,80);text-align:justify;line-height:normal"><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif">La Agencia de Acceso a la Información Pública , órgano de control de la ley Nº 25.326, tiene la atribución de atender las denuncias y reclamos que se interpongan con relación al incumplimiento de las normas sobre protección de datos personales.</font></span></p><div><span style="color:rgb(153,153,153)"><font size="1" face="verdana, sans-serif"><br></font></span></div></pre>
_______________________________________________<br>
LACNOG mailing list<br>
<a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a><br>
<a href="https://mail.lacnic.net/mailman/listinfo/lacnog" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a><br>
Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a><br>
</blockquote>
</div>
</blockquote>
</div>
<br>
</div>
<span>_______________________________________________</span><br>
<span>LACNOG mailing list</span><br>
<span><a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a></span><br>
<span><a href="https://mail.lacnic.net/mailman/listinfo/lacnog" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a></span><br>
<span>Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a></span><br>
</div>
</blockquote>
</div>
</div>

_______________________________________________<br>
LACNOG mailing list<br>
<a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a><br>
<a href="https://mail.lacnic.net/mailman/listinfo/lacnog" rel="noreferrer" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a><br>
Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" rel="noreferrer" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a><br>
</blockquote></div>
_______________________________________________<br>
LACNOG mailing list<br>
<a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a><br>
<a href="https://mail.lacnic.net/mailman/listinfo/lacnog" rel="noreferrer" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a><br>
Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" rel="noreferrer" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a><br>
</blockquote></div>
_______________________________________________<br>
LACNOG mailing list<br>
<a href="mailto:LACNOG@lacnic.net" target="_blank">LACNOG@lacnic.net</a><br>
<a href="https://mail.lacnic.net/mailman/listinfo/lacnog" rel="noreferrer" target="_blank">https://mail.lacnic.net/mailman/listinfo/lacnog</a><br>
Cancelar suscripcion: <a href="https://mail.lacnic.net/mailman/options/lacnog" rel="noreferrer" target="_blank">https://mail.lacnic.net/mailman/options/lacnog</a><br>
</blockquote></div>