<div dir="ltr"><div><div><div><div><div><div><div><div><div><div>Hello,<br><br></div>Since the last update on October 26th, the Activity Stream team has been working to finalize a solid contingency plan for FX57, and also analyzing (with the help of other experts across the org) the data available from past studies, as well as the 57 Beta Shield Study on Activity Stream Retention that is currently in flight.  <br><br></div>Yesterday the confirmed details of that contingency plan, as well as the findings from the above mentioned data gathering and analysis were presented to management for review.  The presentation can be reviewed here -  <a href="https://docs.google.com/presentation/d/1ynPPRRtwALM8zbNxZRTAyoFFFt2UvBZfd_ANVLCEYuc/edit#slide=id.p" target="_blank">Activity Stream: 57 Go/No-Go Decision</a>.<br><br></div><div><div><div><div><div><div></div>In
summary, we had previously seen evidence in 56 Release indicating a drop 
in retention for Activity Stream users vs the legacy new tab experience.  Further analysis of the 56 data has suggested that these results are actually coming from missing data in the experiment 
dataset, rather than from an actual drop in retention.  (<b>Note </b>- the cause of this missing data is still unclear.) Also, we were unable to reproduce such a retention drop while running a similar study in 57 Beta, indicating that Activity Stream does not actually have any negative impact on user retention in FX57.<br><br></div>Upon conclusion of the presentation the recommendation from management was to proceed as follows:<br></div></div></div></div></div></div><ul><li><b>Proceed as per original plan: Activity Stream will be rolled out to 99% of the FX57 population upon release.  A 1% control group will remain on the legacy experience.</b></li></ul>The team will continue to meet regularly and review early data from release, to monitor for any issues or abnormalities.  If any major issues do occur the team may adjust the release parameters for FX57 (i.e., pull back to a smaller population percentage) as the situation dictates.</div></div></div><br></div>Best Regards,<br></div>Jenn<br clear="all"><div><div><div><div><div><div><div><div><div><div><div><div><br>-- <br><div class="m_2056738483097333047gmail_signature"><div dir="ltr"><br>Jennifer A. Chaulk - PMP<br>Engineering Program Manager<br>Mozilla Corporation<br>Work: <a href="tel:(416)%20848-3114" value="+14168483114" target="_blank">1.416.848.3114 x 3029</a><br>Mobile: <a href="tel:(519)%20277-0365" value="+15192770365" target="_blank">519.277.0365</a><br>Email: <a href="mailto:jchaulk@mozilla.com" target="_blank">jchaulk@mozilla.com</a><br>IRC: jchaulk<br></div></div>
</div></div></div></div></div></div></div></div></div></div></div></div></div>