<html><head><meta http-equiv="Content-Type" content="text/html charset=windows-1252"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div>Here's a proposal for feedback:</div><div><div><b><br></b></div><div><b>How do we do better product testing in Q2?</b></div><div><b><a href="http://openmatt.org/2014/04/04/product_testing/">http://openmatt.org/2014/04/04/product_testing/</a></b></div></div><div><br></div><div>It's something we've been talking about a bunch in recent weeks. </div><div>Want to try and synch up:</div><div><br></div><div>a)  all the great testing the Teach the Web team has planned</div><div>(see: <b><a href="https://wiki.mozilla.org/Webmaker/Testing">https://wiki.mozilla.org/Webmaker/Testing</a> </b>) with  </div><div><br></div><div>b) long-standing conversations the Webmaker dev team has been having around testing as well.</div><div>In our Friday demo sessions, etc. </div><div><br></div><div><br></div><div>--Matt</div><div><br></div><div><br></div><div><header class="entry-header">

                                <h1 class="entry-title">How do we do better product testing in Q2?</h1>

        </header>

                <div class="entry-content"><p><img class="alignnone" alt="" src="https://dl.dropboxusercontent.com/spa/6c38yp3crbxni5b/zla_u2dc.png" height="166" width="836"></p><p><b>We’ve been trying to figure this out for Webmaker. </b>Here’s a proposal:<b><br>

</b></p>

<ul>

<li><b>1) Start small.</b> <strong><span style="text-decoration: underline;">Figure out our product testing strategy *for Q2.*</span> </strong>(Instead

 of “everything we need to do to get better at testing.” Which feels too

overwhelming.) What are the most important things to test and learn this quarter?

<ul>

<li>Proposal: start with the key <a href="https://wiki.mozilla.org/Webmaker/Engagement_Ladder">Engagement Ladder</a> stuff.

 We’ve said those calls to action are the most important — let’s make 

sure they’re clear and feel good for users, and identify where they’re 

bailing or getting stuck. For example:

<ul>

<li><strong>Sign up</strong>. Create an account.</li>

<li><strong>Create an event</strong>.</li>

<li><strong>Make a teaching kit</strong>.</li>

<li><strong>Issue a mentor badge</strong>.</li>

</ul>

</li>

<li><strong>Why start here?</strong> Because we’ve said these pathways 

are the *most* important. In terms of reaching our 10k contributors 

goal. We should do usability testing to see where users are getting 

stuck here, and ship incremental improvements to address those.</li>

</ul>

</li>

<li><b>2) Focus on testing with <span style="text-decoration: underline;">lead users</span>. </b>People

 teaching the web. These users are signing up for Webmaker training, and

 will be using and offering feedback on Webmaker stuff over the next 

several weeks. This is a prime opportunity. What do we want to feed in 

there? <a href="https://wiki.mozilla.org/Webmaker/Testing"><b>https://wiki.mozilla.org/Webmaker/Testing</b></a></li>

<li><b>3) Unstick <a href="http://usertesting.com">usertesting.com</a></b>. aka:</li>

</ul>

<blockquote><p>Let’s make it easy for people to test whatever the hell they want, all the time.</p></blockquote>

<ul>

<li>It doesn’t seem like we’re really making full use of <a href="http://usertesting.com">usertesting.com</a>

 as an asset.  Let’s figure out why. (e.g., not sure of process / don’t 

have log-in / don’t have time / need training / ?) How do we make it 

easy and permissionless for our devs and designers to play there?

<ul>

<li><em>For example: when Aali wants to test right-to-left in Popcorn, 

why can’t he just go ahead and do it? How do we make running a test on 

<a href="http://usertesting.com">usertesting.com</a> as easy and standard as writing a blog post?</em></li>

</ul>

</li>

<li><b>4) Optimize the process for sharing out the findings</b>. 

Understanding what we’re learning from this testing. And then feeding it

 back into the product. That’s always the hard part. I think we win 

there by doing usability testing on the small number of things mentioned

 in (1), rather than “let’s test everything.”</li>

<li><strong>5) Update the Webmaker get involved page</strong>. <a href="https://webmaker.org/en-US/feedback">This is where we’re sending folks now</a>. Review and optimize.</li>

</ul><p><em>What’s missing / wrong? Please comment here.</em></p></div></div></body></html>