Google: директива Cloudflare Content-Crawling: none в robots.txt не работает для Googlebot
Google официально подтвердил: директива Content-Crawling: none от Cloudflare в robots.txt не влияет на индексацию и сигналы качества контента со стороны Google.