<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
span.EmailStyle19
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif">Georges,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif">I am going to ask that all tough questions be put in writing so I can review and discuss with the survey’s administrators if I can’t answer them myself.&nbsp; As you noted, there
 is a low response rate and the analysis is complex and may not apply to this group’s work. &nbsp;If you have your questions already formulated, please submit them to the list.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif">Lori<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif"><o:p>&nbsp;</o:p></span></p>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,sans-serif;color:#595959">Lori S. Schulman<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,sans-serif;color:#595959">Senior Director, Internet Policy<o:p></o:p></span></p>
<p class="MsoNormal"><b><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,sans-serif;color:#595959">International Trademark Association (INTA)<o:p></o:p></span></b></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,sans-serif;color:#595959">&#43;1-202-704-0408, Skype: lsschulman<o:p></o:p></span></p>
</div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif"><o:p>&nbsp;</o:p></span></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif"> gnso-rpm-wg-bounces@icann.org [mailto:gnso-rpm-wg-bounces@icann.org]
<b>On Behalf Of </b>George Kirikos<br>
<b>Sent:</b> Wednesday, August 30, 2017 3:29 PM<br>
<b>To:</b> gnso-rpm-wg &lt;gnso-rpm-wg@icann.org&gt;<br>
<b>Subject:</b> Re: [gnso-rpm-wg] Critique of INTA survey<o:p></o:p></span></p>
</div>
</div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Lori,<br>
<br>
It is false to say the my comments have any bias or hostility. They<br>
are sound arguments. I was open to it being a scientifically valid<br>
survey, but then I read it, multiple times. So did Kurt (maybe not<br>
multiple times for him!?!?), who I have no affiliation with.<br>
<br>
I don't know whether the working group chairs were aware of the<br>
study's deep flaws before they made the invitation to present it, or<br>
had even read it, but now they do. If they want to keep the schedule,<br>
I'll be there to ask the tough questions tonight, and let the PDP<br>
members that want to try to defend it do so.<br>
<br>
Sincerely,<br>
<br>
George Kirikos<br>
416-588-0269<br>
<a href="http://www.leap.com/">http://www.leap.com/</a><br>
<br>
<br>
On Wed, Aug 30, 2017 at 3:22 PM, Lori Schulman &lt;<a href="mailto:lschulman@inta.org%3e">lschulman@inta.org&gt;</a> wrote:<br>
&gt; Dear All,<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; This working group chairs requested that I present INTA’s survey results and<br>
&gt; that I what I intend to do. I am here to present existing data. It is up<br>
&gt; to the group to decide if there is any value here. George comments show<br>
&gt; immediate bias and hostility toward the work before we have even started a<br>
&gt; discussion. I have stated all along that the study was intended for another<br>
&gt; purpose and that we had challenges with conducting it. If the PDP WG<br>
&gt; wishes to exclude the findings that is for the group to decide. Everything<br>
&gt; we do is a learning. George, if you feel that this evening’s call will<br>
&gt; have little or no value to your participation, you have the option of not<br>
&gt; dialing in and listening to the recording at your convenience.<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; Lori<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; Lori S. Schulman<br>
&gt;<br>
&gt; Senior Director, Internet Policy<br>
&gt;<br>
&gt; International Trademark Association (INTA)<br>
&gt;<br>
&gt; &#43;1-202-704-0408, Skype: lsschulman<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; From: <a href="mailto:gnso-rpm-wg-bounces@icann.org">gnso-rpm-wg-bounces@icann.org</a> [<a href="mailto:gnso-rpm-wg-bounces@icann.org">mailto:gnso-rpm-wg-bounces@icann.org</a>]<br>
&gt; On Behalf Of George Kirikos<br>
&gt; Sent: Wednesday, August 30, 2017 3:05 PM<br>
&gt; To: gnso-rpm-wg &lt;<a href="mailto:gnso-rpm-wg@icann.org%3e">gnso-rpm-wg@icann.org&gt;</a><br>
&gt; Subject: Re: [gnso-rpm-wg] Critique of INTA survey<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; P.S. There are roughly 8 hours to go until our scheduled call. I would<br>
&gt; invite Lori and/or INTA to simply withdraw the paper from this PDP<br>
&gt; (and the other ICANN group to which it was presented), since<br>
&gt; ultimately it is not a scientifically valid study. Any conclusions<br>
&gt; from it are indefensible.<br>
&gt;<br>
&gt; It would bring more credibility to INTA to withdraw it, in my opinion,<br>
&gt; recognizing it as deeply flawed now, rather than to attempt to defend<br>
&gt; it for 90 minutes tonight, and ultimately see it abandoned/ignored by<br>
&gt; the PDP. As a group, we're always seeking efficiencies --- withdrawing<br>
&gt; this paper and giving everyone back their Wednesday night appears to<br>
&gt; me to be &quot;low hanging fruit&quot; in that regard.<br>
&gt;<br>
&gt; The sooner it's withdrawn, the more time folks will have to make<br>
&gt; arrangements to enjoy their Wednesday evening.<br>
&gt;<br>
&gt; Sincerely,<br>
&gt;<br>
&gt; George Kirikos<br>
&gt; 416-588-0269<br>
&gt; <a href="http://www.leap.com/">http://www.leap.com/</a><br>
&gt;<br>
&gt;<br>
&gt; On Wed, Aug 30, 2017 at 2:13 PM, George Kirikos &lt;<a href="mailto:icann@leap.com%3e">icann@leap.com&gt;</a> wrote:<br>
&gt;&gt; Hi Kurt,<br>
&gt;&gt;<br>
&gt;&gt; Thanks for mostly agreeing with my analysis. However:<br>
&gt;&gt;<br>
&gt;&gt; On Wed, Aug 30, 2017 at 1:47 PM, Kurt Pritz &lt;<a href="mailto:kurt@kjpritz.com%3e">kurt@kjpritz.com&gt;</a> wrote:<br>
&gt;&gt;&gt; There was one conclusion I could draw. It states that UDRP and Sunrise<br>
&gt;&gt;&gt; were<br>
&gt;&gt;&gt; the favored rights protection mechanisms, used to a major or moderate<br>
&gt;&gt;&gt; extent<br>
&gt;&gt;&gt; by 67% and 64% of the respondents respectively. The next most utilized<br>
&gt;&gt;&gt; RPMs<br>
&gt;&gt;&gt; were Trademark Claims and URS (by 36% and 27% respectively). To me this<br>
&gt;&gt;&gt; says<br>
&gt;&gt;&gt; that, to those who are in-the-know, Sunrise is a highly-valued RPM and,<br>
&gt;&gt;&gt; therefore, should be continued. (Sorry, George) (see slides 15 and 51)<br>
&gt;&gt;<br>
&gt;&gt; The first part of your conclusion is correct (obviously anyone who<br>
&gt;&gt; personally benefits from &quot;front of the line&quot; privileges is going to<br>
&gt;&gt; value it), but the second part (therefore, that it should be<br>
&gt;&gt; continued) is NOT correct. As a PDP, our job is to weigh the benefits<br>
&gt;&gt; against the costs of policy choices amongst ALL stakeholders, not just<br>
&gt;&gt; ones receiving benefits.<br>
&gt;&gt;<br>
&gt;&gt; Thus, if that was &quot;the one conclusion (you) could draw&quot;, and it's now<br>
&gt;&gt; debunked, then we're left with the truth, that no conclusions can be<br>
&gt;&gt; drawn from it --- it's for entertainment value only, i.e. it's an<br>
&gt;&gt; advocacy piece, marketing fluff, not a scientifically-valid survey<br>
&gt;&gt; that would endure any serious peer review from those in the field of<br>
&gt;&gt; statistics.<br>
&gt;&gt;<br>
&gt;&gt; To be clear, I tried to keep yesterday's email as short as possible<br>
&gt;&gt; (remember, it was a response to a very long document), and didn't<br>
&gt;&gt; point out every flaw with the survey. To point out another, note that<br>
&gt;&gt; on page 6 it notes that 67% of responses were from USA and Canada.<br>
&gt;&gt; However, INTA's own website states that:<br>
&gt;&gt;<br>
&gt;&gt; <a href="https://www.inta.org/Membership/Pages/Membership.aspx">https://www.inta.org/Membership/Pages/Membership.aspx</a><br>
&gt;&gt;<br>
&gt;&gt; &quot;63% of our member organizations are outside of North America.&quot;<br>
&gt;&gt;<br>
&gt;&gt; This further reinforces my point that it was an unrepresentative<br>
&gt;&gt; sample. As we know from election polling, the survey companies make<br>
&gt;&gt; adjustments in weighting to attempt to compensate for the<br>
&gt;&gt; unrepresentative samples (e.g. if too many men were sampled relative<br>
&gt;&gt; to the known proportion, they'd lower the weights accordingly, etc.).<br>
&gt;&gt; No attempts were made to do this (nor could they credibly have done<br>
&gt;&gt; so, given the small sample size, and lack of randomness).<br>
&gt;&gt;<br>
&gt;&gt; This is a classic case of &quot;If you torture the data long enough, it<br>
&gt;&gt; will confess to anything.&quot;<br>
&gt;&gt;<br>
&gt;&gt; Sincerely,<br>
&gt;&gt;<br>
&gt;&gt; George Kirikos<br>
&gt;&gt; 416-588-0269<br>
&gt;&gt; <a href="http://www.leap.com/">http://www.leap.com/</a><br>
&gt; _______________________________________________<br>
&gt; gnso-rpm-wg mailing list<br>
&gt; <a href="mailto:gnso-rpm-wg@icann.org">gnso-rpm-wg@icann.org</a><br>
&gt; <a href="https://mm.icann.org/mailman/listinfo/gnso-rpm-wg">https://mm.icann.org/mailman/listinfo/gnso-rpm-wg</a><br>
&gt;<br>
_______________________________________________<br>
gnso-rpm-wg mailing list<br>
<a href="mailto:gnso-rpm-wg@icann.org">gnso-rpm-wg@icann.org</a><br>
<a href="https://mm.icann.org/mailman/listinfo/gnso-rpm-wg">https://mm.icann.org/mailman/listinfo/gnso-rpm-wg</a><br>
<br>
<o:p></o:p></p>
<div class="MsoNormal" align="center" style="text-align:center">
</body>
</html>