<div dir="ltr"><div>Today, the test team completed automation on FlameKK as well as sanity and smoke on Aries and Flame 2.6. Our exploratory testing focused on the following areas: Pin the web, Settings, Browser, Add-ons and OTA. <br></div><div><font size="2"><br><font size="2"><b><b>FlameKK Master Automation results:</b></b></font><i><font size="2"><i><b><b><br></b></b></i></font><br>Build under
test:</i></font><br>Device firmware (base) L1TC000118D0<br>Device firmware (date) 08 Jan 2016 12:10:39<br>Device firmware (incremental) eng.cltbld.20160108.071027<br>Device firmware (release) 4.4.2<br>Device identifier flame<br>Device memory 415096 kB<br>Device serial 1d9a563d<br>Device uptime 0 days 0 hours 2 minutes 25 seconds<br>Gaia date <span><span>08 Jan 2016 06:35:05</span></span><br>Gaia revision 887a1d7f2ab6<br>Gecko build 20160108030231<br>Gecko revision 1424cdfc075d1b7e277be914488ac73e20d1c982<br>Gecko version 46.0a1<font size="2"><b><br><br></b><i>Smoketests:</i></font><p style="margin-bottom:0in"><font size="2">161 tests ran in 4544.2
seconds.<br>37 passed, 121 skipped, 1 failed, 2 errors.<br>0 expected
failures, 0 unexpected passes.</font></p><p style="margin-bottom:0in"><i><font size="2">Non-smoketest:</font></i></p><p style="margin-bottom:0in;font-weight:normal"><font size="2">117
tests ran in 6313.8 seconds.<br>50 passed, 60 skipped, 2 failed, 5
errors.<br>0 expected failures, 0 unexpected passes.</font></p><p><font size="2">117 tests ran in 5320.0 seconds.<br>52 passed, 60
skipped, 3 failed, 1 errors.<br>1 expected failures, 0 unexpected
passes.</font></p><p></p><p><img alt="Inline image 1" src="cid:ii_15223978ca7e1134" height="278" width="449"></p><p></p><p><span><span><b>Aries Master Manual Smoke Test Results:<br></b></span></span></p><div>Aries Status: Yellow, no new blockers, 1 existing blocker<span><br><br></span></div><span>52/53 Passed<br></span><br><i><span>Smoke</span> Test Failures:<br></i>- <a href="http://bugzil.la/1237460" target="_blank">http://bugzil.la/1237460</a> Calendar events cannot start on the day they were created<i><br></i><span style="font-family:Arial">* Fails <span><span>[<a href="https://moztrap.mozilla.org/manage/case/6118/" target="_blank">6118</a>]</span></span></span><span><span><br></span></span></div><span><span></span></span>** This issue has been resolved by backout but is not in the current build.<br><br>Severe issues encountered:<br><a href="http://mzl.la/1PRnpPr" target="_blank">mzl.la/1PRnpPr</a><br><div><p>Device: Aries 2.6 [Full Flash]<br>BuildID: 20160108142141<br>Gaia: 887a1d7f2ab601fc40b923b4e16e6b9b48fc982e<br>Gecko: 3f780f4b14acab29b16bc4141a44180a8af9dd08<br>Gonk: a19052e4389c3ae2d8fc3e7a74a475401baacc56<br>Version: 46.0a1 (2.6) <br>Firmware Version: D5803_23.1.A.1.28_NCB.ftf<br>User Agent: Mozilla/5.0 (Mobile; rv:46.0) Gecko/46.0 Firefox/46.0<br></p><div></div><div>Taskcluster:<br><a href="https://tools.taskcluster.net/task-inspector/#DIkLKt1JSiy1RCc-MhRXlA/" target="_blank">https://tools.taskcluster.net/task-inspector/#DIkLKt1JSiy1RCc-MhRXlA/</a><br></div><br>Daily Smoke Test Logs:<br><a href="https://docs.google.com/spreadsheets/d/13BjtbYDVaiC6TvOAd1x-SuoYNNM8aH5-xdJS7TU3o-U/edit?pli=1#gid=1904593881" target="_blank">https://docs.google.com/spreadsheets/d/13BjtbYDVaiC6TvOAd1x-SuoYNNM8aH5-xdJS7TU3o-U/edit?pli=1#gid=1904593881</a><br><br>Moztrap Run:<br><a href="https://moztrap.mozilla.org/runtests/run/8718/env/347/" target="_blank">https://moztrap.mozilla.org/runtests/run/8718/env/347/</a><br><img alt="Inline image 2" src="cid:ii_15223997273f7b02" height="278" width="449"><br><span><span><b>FlameKK Master Manual Smoke Test Results:</b></span></span><br><div><i><span><br></span></i></div>Flame 2.6 Status: Yellow, no new blockers, 1 existing blocker<br><br>53/54 passed<br><br><i><span>Smoke</span> Test Failures:</i><br><span><span></span></span><span style="font-family:Arial"><div><span style="font-family:arial,sans-serif"> </span>- <a href="http://bugzil.la/1237460" target="_blank">http://bugzil.la/1237460</a> Calendar events cannot start on the day they were created<i><br></i></div><div>* Fails <span><span>[<a href="https://moztrap.mozilla.org/manage/case/6118/" target="_blank">6118</a>]<br></span></span><span><span> </span></span>** This issue has been resolved by backout but is still in the current build.<br><br>Severe issues encountered:<br><a href="http://mzl.la/1ZdveET" target="_blank">mzl.la/1ZdveET</a><br><br><div dir="ltr"><div><div>Environmental Variables:</div>Device: FlameKK 2.6 [Full Flash][512mb]<br>BuildID: 20160108030231<br>Gaia: 887a1d7f2ab601fc40b923b4e16e6b9b48fc982e<br>Gecko: 1424cdfc075d1b7e277be914488ac73e20d1c982<br>Gonk: 205ac4204bbbb2098a8046444acba551ba5dc75a<br>Version: 46.0a1 (2.6) <br>Firmware Version: v18D v4<br>User Agent: Mozilla/5.0 (Mobile; rv:46.0) Gecko/46.0 Firefox/46.0<br></div><br></div><div>Build Location:<br><a href="https://pvtbuilds.mozilla.org/pvt/mozilla.org/b2gotoro/nightly/mozilla-central-flame-kk/2016/01/2016-01-08-03-02-31/" target="_blank">https://pvtbuilds.mozilla.org/pvt/mozilla.org/b2gotoro/nightly/mozilla-central-flame-kk/2016/01/2016-01-08-03-02-31/</a><br></div><br>Daily Smoke Test Logs:<br><a href="https://docs.google.com/spreadsheets/d/13BjtbYDVaiC6TvOAd1x-SuoYNNM8aH5-xdJS7TU3o-U/edit?pli=1#gid=0" target="_blank">https://docs.google.com/spreadsheets/d/13BjtbYDVaiC6TvOAd1x-SuoYNNM8aH5-xdJS7TU3o-U/edit?pli=1#gid=0</a><br><br>Moztrap Run:<br><a href="https://moztrap.mozilla.org/runtests/run/8719/env/27835/" target="_blank">https://moztrap.mozilla.org/runtests/run/8719/env/27835/</a><br><img alt="Inline image 3" src="cid:ii_152239a99d10a360" height="278" width="449"><br><b>Exploratory Testing:<br></b><br>Automation, Smoke and Exploratory issues written:<b><br></b><a href="http://mzl.la/1kTBvma" target="_blank">mzl.la/1kTBvma</a><b><br></b><img alt="Inline image 1" src="cid:ii_15223b5f41fcc270" height="278" width="449">Thank you<br><br></div></span></div><div>Kevin T.<br></div><div><a href="https://moztrap.mozilla.org/runtests/run/8718/env/347/" target="_blank"></a></div></div>