<div dir="ltr">FWIW, there is an open bug for this: <a href="https://bugzilla.xfce.org/show_bug.cgi?id=11404">https://bugzilla.xfce.org/show_bug.cgi?id=11404</a><br></div><br><div class="gmail_quote">On Fri Feb 13 2015 at 10:55:15 AM Chris Bainbridge <<a href="mailto:chris.bainbridge@gmail.com">chris.bainbridge@gmail.com</a>> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>On 13 February 2015 at 10:09, Nick Schermer <<a href="mailto:nick@xfce.org" target="_blank">nick@xfce.org</a>> wrote:<br>><br>> Yes, server capacity. CGI scripts are not very fast and search engines tend to send a lot of requests (many deep links it will follow).<br>> That said, the bug database provides a search engine as well.<br>><br>> Nick<br><br></div></div><div dir="ltr"><div>You can change the Googlebot crawl rate<br><br><a href="https://support.google.com/webmasters/answer/48620?hl=en" target="_blank">https://support.google.com/webmasters/answer/48620?hl=en</a><br><br>And there is crawl-delay in robots.txt for some other agents<br><br><a href="http://stackoverflow.com/questions/17377835/robots-txt-what-is-the-proper-format-for-a-crawl-delay-for-multiple-user-agent" target="_blank">http://stackoverflow.com/questions/17377835/robots-txt-what-is-the-proper-format-for-a-crawl-delay-for-multiple-user-agent</a><br><a href="http://en.wikipedia.org/wiki/Robots_exclusion_standard#Crawl-delay_directive" target="_blank">http://en.wikipedia.org/wiki/Robots_exclusion_standard#Crawl-delay_directive</a></div></div><div dir="ltr"><div><br><br>> I use Google to search for Xfce-related issues, just like everyone else.<br><br></div></div><div dir="ltr"><div></div><div>Indeed. It would help users if the bugtracker content were indexed by the search engines.<br></div></div>
______________________________<u></u>_________________<br>
Xfce4-dev mailing list<br>
<a href="mailto:Xfce4-dev@xfce.org" target="_blank">Xfce4-dev@xfce.org</a><br>
<a href="https://mail.xfce.org/mailman/listinfo/xfce4-dev" target="_blank">https://mail.xfce.org/mailman/<u></u>listinfo/xfce4-dev</a></blockquote></div>