<html>
  <head>
    <meta content="text/html; charset=windows-1252"
      http-equiv="Content-Type">
  </head>
  <body bgcolor="#FFFFFF" text="#000000">
    <p>Hi Kurt and Rebecca,</p>
    <p>Tx for kicking this off.  I think Rebecca's paragraphs build on
      Kurt's paragraphs in a positive and constructive way. <br>
    </p>
    <p>Best, Kathy<br>
    </p>
    <br>
    <div class="moz-cite-prefix">On 1/20/2018 4:47 PM, Tushnet, Rebecca
      wrote:<br>
    </div>
    <blockquote
cite="mid:CY1PR0701MB16964DB7A31D02D105037B9A99EE0@CY1PR0701MB1696.namprd07.prod.outlook.com"
      type="cite">
      <meta http-equiv="Content-Type" content="text/html;
        charset=windows-1252">
      <style type="text/css" style="display:none;"><!-- P {margin-top:0;margin-bottom:0;} --></style>
      <div id="divtagdefaultwrapper"
style="font-size:12pt;color:#000000;font-family:Calibri,Helvetica,sans-serif;"
        dir="ltr">
        <p style="margin-top:0;margin-bottom:0">Thanks for beginning the
          discussion, Kurt.  I like the personal information point,
          though we may ultimately be asking people to talk about
          specific experiences.  I would suggest being somewhat less
          directive in terms of question formulation, as well as less
          discouraging about the task at hand.  I doubt that there are
          fewer registrants and potential registrants than registrars
          and registries.  Moreover, even sample sizes in the
          mid-hundreds may be sufficient to make good projections, if
          the samples are taken well.  Here are some suggested tweaks:</p>
        <p style="margin-top:0;margin-bottom:0"><br>
        </p>
        <p class="MsoNormal"><o:p> </o:p></p>
        <p class="MsoNormal">Regarding the Survey to Domain Name
          Registrants and Potential Registrants<o:p></o:p></p>
        <p class="MsoNormal"><o:p> </o:p></p>
        <p class="MsoNormal">The surveys of registrants and potential
          registrants address the broadest universe of potential
          respondents in the covered categories.  The bidder should
          consider (1) the survey contents, in terms of questions that
          registrants and potential registrants will be able to answer,
          and that, when answered, will provide meaningful information,
          and (2) the methodology of reaching registrants and potential
          registrants to provide meaningful results.
          <o:p></o:p></p>
        <p class="MsoNormal"><o:p> </o:p></p>
        <p class="MsoNormal">The ICANN volunteer policy team developing
          registrant survey questions has only created the rough drafts.
          Answers to these questions will inform the discussion of the
          Charter questions that you have read. ICANN staff and policy
          volunteers will continue to hone the survey questions during
          the vendor selection process and then will work with the
          selected survey provider to create a set of questions and
          methodology to economically and effectively elicit the
          requisite data.
          <o:p></o:p></p>
        <p class="MsoNormal"><o:p> </o:p></p>
        <p class="MsoNormal">Our guidance on this is:<o:p></o:p></p>
        <p class="MsoNormal"><o:p> </o:p></p>
        <p class="MsoNormal">To increase the likelihood that registrants
          respond: <o:p></o:p></p>
        <p class="MsoNormal">The survey should be relatively short <o:p></o:p></p>
        <p class="MsoNormal">It should follow other best practices in
          question formulation and sequence to avoid leading questions
          and elicit usable responses<o:p></o:p></p>
        <p class="MsoNormal">Requests for personal information should be
          avoided<o:p></o:p></p>
        <br>
        <p style="margin-top:0;margin-bottom:0"><br>
        </p>
        <div id="Signature">
          <div style="font-family:Tahoma; font-size:13px">
            <div style="font-family:Tahoma; font-size:13px">
              <div><br>
              </div>
              Rebecca Tushnet</div>
            <div style="font-family:Tahoma; font-size:13px">Frank
              Stanton Professor of First Amendment Law, Harvard Law
              School<br>
              703 593 6759 </div>
          </div>
        </div>
      </div>
      <hr style="display:inline-block;width:98%" tabindex="-1">
      <div id="divRplyFwdMsg" dir="ltr"><font style="font-size:11pt"
          face="Calibri, sans-serif" color="#000000"><b>From:</b>
          Gnso-rpm-data <a class="moz-txt-link-rfc2396E" href="mailto:gnso-rpm-data-bounces@icann.org"><gnso-rpm-data-bounces@icann.org></a> on
          behalf of Kurt Pritz <a class="moz-txt-link-rfc2396E" href="mailto:kurt@kjpritz.com"><kurt@kjpritz.com></a><br>
          <b>Sent:</b> Saturday, January 20, 2018 4:27:10 PM<br>
          <b>To:</b> Mary Wong; Julie Hedlund<br>
          <b>Cc:</b> <a class="moz-txt-link-abbreviated" href="mailto:gnso-rpm-data@icann.org">gnso-rpm-data@icann.org</a><br>
          <b>Subject:</b> [Gnso-rpm-data] Registrant Questions
          Paragraphs for RFP</font>
        <div> </div>
      </div>
      <div class="" style="word-wrap:break-word">Hi Mary, Julie, et.al.:
        <div class=""><br class="">
        </div>
        <div class="">Below are a couple paragraphs that might be
          included in the RFP for a survey provider. The “Our Guidance”
          paragraphs are optional but I think it is a good opportunity
          to steer the proposals in the right direction. </div>
        <div class=""><br class="">
        </div>
        <div class="">Here you go:</div>
        <div class=""><br class="">
        </div>
        <div class=""><br class="">
        </div>
        <div class=""><b class="">Regarding the Survey to Registrants
            and Potential Registrants</b>
          <div class=""><br class="">
          </div>
          <div class="">The surveys of registrants has the twin risks
            of: </div>
          <div class="">
            <ul class="x_MailOutline">
              <li class="">Being the most expensive part of the work,
                and</li>
              <li class="">Returning little or no value if not done
                properly</li>
            </ul>
            <div class=""><br class="">
            </div>
          </div>
          <div class="">Therefore the bidders proposal must address:</div>
          <div class="">
            <ul class="x_MailOutline">
              <li class="">The survey contents, i.e., questions that: : 
                <ul class="">
                  <li class="">registrants are willing to answer and </li>
                  <li class="">When answered, will provide meaningful
                    information</li>
                </ul>
              </li>
              <li class="">The survey methodology, the manner of
                economically reaching registrants in sufficient numbers
                to provide statistically meaningful results. (Less than
                1% of the world’s population has registered a domain
                name.)</li>
            </ul>
            <div class=""><br class="">
            </div>
          </div>
          <div class="">The ICANN volunteer policy team developing
            registrant survey questions has only created the rough
            drafts. These questions, when answered by registrant in
            significant numbers, will inform the discussion of the
            Charter questions that you have read. ICANN staff and policy
            volunteers will continue to hone the survey questions during
            the vendor selection process and then will work with the
            selected survey provider to create a set of questions and
            methodology to economically and effectively elicit the
            requisite data. </div>
          <div class=""><br class="">
          </div>
          <div class="">Our guidance on this is:</div>
          <div class=""><br class="">
          </div>
          <div class="">To increase the likelihood that registrants
            respond and to control costs: </div>
          <div class="">
            <ul class="">
              <li class="">The survey should be relatively short</li>
              <li class="">Most or all of the questions should be
                multiple choice </li>
              <li class="">Open ended questions (if any) should be at
                the end </li>
              <li class="">Requests for personal information should be
                avoided</li>
            </ul>
          </div>
          <div class=""><br class="">
          </div>
          <div class="">To reach a requisite number of respondents, the
            survey provider might: </div>
          <div class="">
            <ul class="">
              <li class="">Use access to large survey panels</li>
              <li class="">Using domain industry contacts, develop
                incentives, and work with registrars to directly reach
                out to their customers </li>
            </ul>
          </div>
          <div class=""><br class="">
          </div>
          <div class=""><br class="">
          </div>
        </div>
      </div>
      <br>
      <fieldset class="mimeAttachmentHeader"></fieldset>
      <br>
      <pre wrap="">_______________________________________________
Gnso-rpm-data mailing list
<a class="moz-txt-link-abbreviated" href="mailto:Gnso-rpm-data@icann.org">Gnso-rpm-data@icann.org</a>
<a class="moz-txt-link-freetext" href="https://mm.icann.org/mailman/listinfo/gnso-rpm-data">https://mm.icann.org/mailman/listinfo/gnso-rpm-data</a></pre>
    </blockquote>
    <br>
  </body>
</html>