<div dir="ltr">Also saw a major traffic drop. There is a Root Cause to be issued early in the week I'm told.<div><br></div><div><br></div><div>-jim</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Jun 11, 2021 at 2:42 PM Siyuan Miao <<a href="mailto:aveline@misaka.io">aveline@misaka.io</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Yea, it was down but both RS are online and feeding us unreachable nexthops during the outage .</div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Sat, Jun 12, 2021 at 1:27 AM Seth Mattinen <<a href="mailto:sethm@rollernet.us" target="_blank">sethm@rollernet.us</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On 6/11/21 10:16 AM, Jon Lewis wrote:<br>
> On Fri, 11 Jun 2021, Seth Mattinen wrote:<br>
> <br>
>> Did Any2 LAX barf last night between about 1am and 8am Pacific time?<br>
> <br>
> More like 00:00-7:45 (Pacific time).<br>
> <br>
> Anyone know what broke, and why the IX was dead for nearly 8 hours?<br>
> This is our second recent issue with "an Any2 IX", having dealt with an <br>
> IX partition event at Any2 Denver just a few weeks ago.<br>
> <br>
<br>
<br>
What I saw was a lot of unreachable nexthops (I'm in LA2) on routes <br>
advertised through the route servers. Most of my direct BGP sessions <br>
were down, but a handful were still working including the route servers.<br>
<br>
For example, I was getting routes for AS29791 from the route servers, <br>
but nexthop 206.72.211.106 was dead to me. Not to pick on Internap other <br>
than a mutual customer called me directly at 1am and wanted to know why <br>
things were down.<br>
<br>
I killed the route server sessions and went back to sleep.<br>
<br>
Feels like LA1 and LA2 got split, but however the route servers <br>
interconnect still worked, which was problematic.<br>
</blockquote></div>
</blockquote></div>