<html><head><meta http-equiv="Content-Type" content="text/html charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class=""><div class="">Hi team: Here are some ideas for success metrics. I would love to get feedback on the ideas and then turn them into actionable bugs and eventually a dashboard. What can we know?</div><div class=""><b class=""><br class=""></b></div><div class=""><b class="">Happiness</b><i class=""> – Measures of user attitudes, often collected via survey. For example: satisfaction, perceived ease of use, and net-promoter score.</i></div><div class=""><div class=""><ul class=""><li class="">We want users to only remove the logins they intend to remove.</li><ul class=""><li class="">They don’t add a login back right after they remove it. Don't click Undo.</li></ul><li class="">We want users to be less frustrated by duplicate passwords.</li><ul class=""><li class="">Users have fewer duplicate entries for sites.</li></ul></ul></div><div class=""><b class="">Engagement</b> – <i class="">Level of user involvement, typically measured via behavioral proxies such as frequency, intensity, or depth of interaction over some time period. Examples might include the number of visits per user per week or the number of photos uploaded per user per day.</i></div></div><div class=""><div class=""><ul class=""><li class="">Showing the key icon more often as a door hanger icon means users will manage their logins more.</li><ul class=""><li class="">Counts of clicking on key icon, viewing passwords, editing passwords, copying usernames and passwords</li></ul><li class="">Showing a link to the Saved Logins at the bottom of the auto-complete login will lead to increased engagement.</li><ul class=""><li class="">Clicking on Saved Passwords row, viewing passwords, editing passwords, copying usernames and passwords</li></ul><li class="">Showing the key icon when on a login form means users will be able to access needed credentials.</li><ul class=""><li class="">Clicking on the blue key icon, retrieve saved logins, click copy username/password, and use login button</li></ul></ul></div></div><div class=""><b class="">Adoption </b>– <i class="">New users of a product or feature. For example: the number of accounts created in the last seven days or the percentage of Gmail users who use labels.</i></div><div class=""><div class=""><ul class=""><li class="">We want people to sense that our password manager is secure and trustworthy.</li><ul class=""><li class="">Users don’t install 3rd party password managers</li><li class="">Users check (or leave checked) to remember passwords for sites</li></ul><li class="">We believe the new door hanger design will lead to increased engagement.</li><ul class=""><li class="">Saving more passwords, editing more passwords, never remembering more passwords</li></ul></ul></div></div><div class=""><b class="">Retention – </b><i class="">The rate at which existing users are returning. For example: how many of the active users from a given time period are still present in some later time period? You may be more interested in failure to retain, commonly known as “churn.”</i></div><div class=""><ul class="MailOutline"><li class="">Users trust Firefox to remember their password.</li><ul class=""><li class="">Users check (or leave checked) to remember passwords for sites</li><ul class=""><li class=""><a href="http://telemetry.mozilla.org/#filter=nightly/39/PWMGR_SAVING_ENABLED/saved_session/Firefox&aggregates=multiselect-all!Submissions&evoOver=Builds&locked=true&sanitize=false&renderhistogram=Graph" class="">http://telemetry.mozilla.org/#filter=nightly%2F39%2FPWMGR_SAVING_ENABLED%2Fsaved_session%2FFirefox&aggregates=multiselect-all!Submissions&evoOver=Builds&locked=true&sanitize=false&renderhistogram=Graph</a></li></ul></ul></ul><div class=""><br class=""></div><div class=""><b class="">Task Success</b> – <i class="">This includes traditional behavioral metrics of user experience, such as efficiency (e.g. time to complete a task), effectiveness (e.g. percent of tasks completed), and error rate. This category is most applicable to areas of your product that are very task-focused, such as search or an upload flow.</i></div><div class=""><ul class="MailOutline"><li class="">We want users to find logins as needed so they can authenticate to websites with little effort.</li><ul class=""><li class="">After user clicks Use Login they don’t immediately interact with the saved logins in another way.</li><li class="">Users are faster than users who are not saving passwords.</li></ul><li class="">Users will save fewer incorrect logins because they are more readable and editable.</li><ul class=""><li class="">Fewer password resets on the web.</li><li class="">Resetting password less often.</li></ul></ul></div><div class=""><br class=""><div class="">
<div class=""><div style="orphans: 2; widows: 2;" class="">Ryan Feeley</div><div style="orphans: 2; widows: 2;" class="">UX, Cloud Services</div><div style="orphans: 2; widows: 2;" class="">Mozilla UX</div><div style="orphans: 2; widows: 2;" class="">IRC: rfeeley</div></div>

</div>
<br class=""></div></div></body></html>