<div dir="ltr">On Mon, Dec 3, 2018 at 2:45 PM Andrew Sullivan Cant <<a href="mailto:acant@alumni.uwaterloo.ca">acant@alumni.uwaterloo.ca</a>> wrote:<br><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">I have not done any robots.txt or SEO stuff recently, so I do not know<br>
how respectful the current crop of search engines are.<br></blockquote><div><br></div><div>The robots.txt is useless. Current crawlers do not not respect it. <br></div><div> <br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
But that being said, would updating our robots.txt to disallow the<br>
search engines be useful?<br></blockquote><div><br></div><div>It is not something one can rely on.  <br></div><div><br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
We could note that in the mailing list page, but also state more clearly<br>
that the archives are publicly accessible.<br>
<br>
I do appreciate that there is a difference between publishing things and<br>
publishing and promoting them. (e.g., someone's address being published<br>
somewhere online vs doxxing them to a specific group)</blockquote></div><div><br></div><div>Stating my position again:</div><div><br></div><div>1. The public archives are not that useful, since the results do not show up in popular search engines. <br></div><div><br></div><div>2. People do not like searching on their name and finding out emails they sent. This is a turnoff for some, and a barrier to being on the mailing list. <br></div><div><br></div><div>So, here is another approach: can the archives be searchable by members of the mailing list? If so, this covers the use cases of those who want to find something that was discussed a while ago, ..etc. while preventing names, email addresses, and discussions from being public to everyone.</div><div><br></div><div>Would that compromise satisfy both sides?<br></div></div>