Hm... maybe not. Is that something we want to look into before hand? I&#39;m not sure what kind of options exist for that, as I don&#39;t use svn that often (or at all).<br><br><div class="gmail_quote">On Tue, May 10, 2011 at 3:01 PM, Toshio Kuratomi <span dir="ltr">&lt;<a href="mailto:a.badger@gmail.com">a.badger@gmail.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;"><div class="im">On Tue, May 10, 2011 at 02:02:11PM -0400, Ricky Elrod wrote:<br>
&gt; Wanted to do this before freeze, but never had a chance -- let&#39;s get robots.txt<br>
&gt; working on hosted1 and try to bring down cpu load and improve page load times a<br>
&gt; bit.<br>
&gt;<br>
&gt; Thoughts/+1&#39;s please. robots.txt is already there and has been for a long time,<br>
&gt; but nothing has told apache to use it, because apache requests go straight to<br>
&gt; trac.<br>
&gt;<br>
&gt; robots.txt is set to block crawlers from accessing fh.o/*/browser/* (which is<br>
&gt; the trac source code browser) -- as per <a href="https://fedorahosted.org/" target="_blank">https://fedorahosted.org/</a><br>
&gt; fedora-infrastructure/ticket/1848<br>
&gt;<br>
</div>+1<br>
<br>
The web interfaces at <a href="http://git.fedorahosted.org/git/" target="_blank">git.fedorahosted.org/git/</a>, bzr.fp.o/bzr, and<br>
hg.fp.o/hg take care of this I think.  The one question I have in regards to<br>
this is do we have an svn web viewer?<br>
<br>
-Toshio<br>
<div class="im">&gt;<br>
&gt;<br>
&gt; diff --git a/configs/web/fedorahosted.org.conf b/configs/web/<br>
&gt; fedorahosted.org.conf<br>
&gt; index d0f7139..8f1f2e1 100644<br>
&gt; --- a/configs/web/fedorahosted.org.conf<br>
&gt; +++ b/configs/web/fedorahosted.org.conf<br>
&gt; @@ -2,6 +2,9 @@<br>
&gt;      ServerName <a href="http://fedorahosted.org" target="_blank">fedorahosted.org</a><br>
&gt;      ServerAlias <a href="http://www.fedorahosted.org" target="_blank">www.fedorahosted.org</a><br>
&gt;<br>
&gt; +    # Make robots.txt be used.<br>
&gt; +    Alias /robots.txt /srv/web/<a href="http://fedorahosted.org/robots.txt" target="_blank">fedorahosted.org/robots.txt</a><br>
&gt; +<br>
&gt;      Redirect 301 / <a href="https://fedorahosted.org/" target="_blank">https://fedorahosted.org/</a><br>
&gt;  &lt;/VirtualHost&gt;<br>
&gt;<br>
<br>
</div>&gt; _______________________________________________<br>
&gt; infrastructure mailing list<br>
&gt; <a href="mailto:infrastructure@lists.fedoraproject.org">infrastructure@lists.fedoraproject.org</a><br>
&gt; <a href="https://admin.fedoraproject.org/mailman/listinfo/infrastructure" target="_blank">https://admin.fedoraproject.org/mailman/listinfo/infrastructure</a><br>
<br>
<br>_______________________________________________<br>
infrastructure mailing list<br>
<a href="mailto:infrastructure@lists.fedoraproject.org">infrastructure@lists.fedoraproject.org</a><br>
<a href="https://admin.fedoraproject.org/mailman/listinfo/infrastructure" target="_blank">https://admin.fedoraproject.org/mailman/listinfo/infrastructure</a><br></blockquote></div><br>