<div dir="ltr">Hello,<div>I had a moderate DDOS attack on my forum too, but I am sure it was not related to AI crawling. Too many different IP addresses.</div><div><br></div><div>It was very easy to solve it with Cloudflare. My forum now detects if the visitor is a real user, but lets known search engines and AI bots thru.</div><div><br></div><div>The known bots registered with Cloudflare behave well and don't flood forums.</div><div><br></div><div>I chose a payed Cloudflare plan (around $25 per month), but it might be possible with the free plan too.</div><div><br></div><div>If not, I would be more than happy to pay for this for the FPC forum.</div><div><br></div><div>I think that it is very important that legitimate AI crawlers and search engines have access.</div><div><br></div><div><br></div></div><br><div class="gmail_quote gmail_quote_container"><div dir="ltr" class="gmail_attr">On Sat, Sep 6, 2025 at 9:38 AM Nikolay Nikolov via fpc-pascal <<a href="mailto:fpc-pascal@lists.freepascal.org">fpc-pascal@lists.freepascal.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><u></u>

  
    
  
  <div>
    <p><br>
    </p>
    <div>On 9/6/25 12:05 AM, Wayne Sherman via
      fpc-pascal wrote:<br>
    </div>
    <blockquote type="cite">
      <pre>Is it possible to make the forum and wiki data available on a mirror
for the use of AI crawlers?
(are search engine crawlers also blocked?)</pre>
    </blockquote>
    Would you pay money for the hosting and for the maintenance of such
    a mirror?<span style="white-space:pre-wrap">
</span><span style="white-space:pre-wrap">
</span>
    <blockquote type="cite">
      <pre>You asked ChatGPT5:
"If websites with large Pascal forums and wikis block AI data
harvesting bots, what will be the result for LLMs missing this
training data and what will be the effect on these LLMs for Pascal
related queries? Provide a simple concise answer with bullet points."</pre>
    </blockquote>
    <p>You should've asked:</p>
    <p>"If websites with large Pascal forums and wikis get DDoS'd by AI
      data harvesting bots..."</p>
    <p>The answer should be that, if they get DDoS'd, then nobody would
      be able to access them - neither AI bots, nor regular users. So,
      the outcome would be worse.<br>
    </p>
    <p><span style="white-space:pre-wrap">
</span><span style="white-space:pre-wrap">
</span></p>
    <blockquote type="cite">
      <pre>ChatGPT said:</pre>
    </blockquote>
    <p>Please don't post ChatGPT generated responses as if they have any
      kind of authority. ChatGPT comes with a fine print: "ChatGPT can
      make mistakes." In this particular case, the company that trains
      ChatGPT has a clear conflict of interest. It is only normal that
      it exaggerates the effect of blocking AI harvesting bots.<br>
    </p>
    <p>Nikolay<br>
    </p>
  </div>

_______________________________________________<br>
fpc-pascal maillist  -  <a href="mailto:fpc-pascal@lists.freepascal.org" target="_blank">fpc-pascal@lists.freepascal.org</a><br>
<a href="https://lists.freepascal.org/cgi-bin/mailman/listinfo/fpc-pascal" rel="noreferrer" target="_blank">https://lists.freepascal.org/cgi-bin/mailman/listinfo/fpc-pascal</a><br>
</blockquote></div>