<div dir="ltr">Created a robots.txt for viewvc and gitweb. System load now down below 10. If/when required, I'll look at creating a robots.txt for Trac as well. That's more involved due to the lack of using URL patterns in robots.txt.<div>
<br></div><div>Regards,</div><div><br></div><div>Erik.</div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Tue, Jun 17, 2014 at 10:57 AM, Erik Huelsmann <span dir="ltr"><<a href="mailto:ehuels@gmail.com" target="_blank">ehuels@gmail.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi,<div><br></div><div>Seems like cl-net is being crawled by bots. there are lots of active trac processes as well as viewcgi processes. Which seems logical: there used to be a pretty extensive robots.txt file which should prevent scanning gitweb, viewcgi and large parts of trac. apparently, that's not there anymore.</div>

<div><br></div><div><br></div><div>Regards,</div><div><br></div><div><br></div><div>Erik.</div><div><br></div><div><br></div></div><div class="gmail_extra"><div><div class="h5"><br><br><div class="gmail_quote">On Tue, Jun 17, 2014 at 6:24 AM, Raymond Toy <span dir="ltr"><<a href="mailto:toy.raymond@gmail.com" target="_blank">toy.raymond@gmail.com</a>></span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On 6/14/14 2:11 PM, Anton Vodonosov wrote:<br>
> For example: <a href="http://trac.common-lisp.net/cmucl" target="_blank">http://trac.common-lisp.net/cmucl</a><br>
><br>
It was up a day or so ago, but it is down again.<br>
<br>
Also,  as I type this, the load avg on <a href="http://c-l.net" target="_blank">c-l.net</a> is 46, with about 20<br>
viewvc.cgi processes running.<br>
<br>
Ray<br>
<div><div><br>
<br>
_______________________________________________<br>
Clo-devel mailing list<br>
<a href="mailto:Clo-devel@common-lisp.net" target="_blank">Clo-devel@common-lisp.net</a><br>
<a href="http://common-lisp.net/cgi-bin/mailman/listinfo/clo-devel" target="_blank">http://common-lisp.net/cgi-bin/mailman/listinfo/clo-devel</a><br>
</div></div></blockquote></div><br><br clear="all"><div><br></div></div></div><span class="HOEnZb"><font color="#888888">-- <br><div dir="ltr">Bye,<div><br></div><div>Erik.</div><div><br></div><div><a href="http://efficito.com/" target="_blank">http://efficito.com</a> -- Hosted accounting and ERP.</div>

<div>Robust and Flexible. No vendor lock-in.</div></div>
</font></span></div>
</blockquote></div><br><br clear="all"><div><br></div>-- <br><div dir="ltr">Bye,<div><br></div><div>Erik.</div><div><br></div><div><a href="http://efficito.com/" target="_blank">http://efficito.com</a> -- Hosted accounting and ERP.</div>
<div>Robust and Flexible. No vendor lock-in.</div></div>
</div>