<div dir="ltr">I have now fully recovered thimble.  I did so by resizing the existing thimble database, so we have had no data loss.<div><br></div><div>In total, we were down from <span style="font-family:arial,sans-serif;font-size:13.333333015441895px">12:17:22(UTC) - 13:26:00(UTC).  The app itself was available, but no user data was able to make it to our database.</span></div>
<div><span style="font-family:arial,sans-serif;font-size:13.333333015441895px"><br></span></div><div><span style="font-family:arial,sans-serif;font-size:13.333333015441895px"><br></span></div></div><div class="gmail_extra">
<br><br><div class="gmail_quote">On Tue, Feb 11, 2014 at 7:20 AM, JP Schneider <span dir="ltr"><<a href="mailto:jp@mozillafoundation.org" target="_blank">jp@mozillafoundation.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<div dir="ltr">Now that I am the process of recovering this, some additional details.<div><br></div><div>It looks like our db was a bit stressed:</div><div><img src="cid:ii_144211a2732bd9e6" alt="Inline image 1"><br></div>

<div><br></div><div>After forcing a failover, I was able to connect once again.</div><div>I am currently resizing this instance back to an m1.small.</div></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra">
<br><br><div class="gmail_quote">On Tue, Feb 11, 2014 at 7:02 AM, JP Schneider <span dir="ltr"><<a href="mailto:jp@mozillafoundation.org" target="_blank">jp@mozillafoundation.org</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Good morning,<div><br></div><div>There seems to have been some corruption in our Thimble production database.  I am looking into this now.</div>

<div><br></div><div>The symptom to the end user seems to be when an item is published, no URL is given for your new make.</div>
</div>
</blockquote></div><br></div>
</div></div></blockquote></div><br></div>