#noindex
3 Einzeiler mit diesem Stichwort.
Alle Einzeiler mit Tag noindex
Meta robots und noindex im HTML einer Seite finden
$curl -s https://example.com/ | tr '\n' ' ' | grep -oiE '<meta[^>]*name=.?(robots|googlebot)[^>]*>'
Prüfen, ob WordPress Suchmaschinen aussperrt
$wp option get blog_public --path=/var/www/vhosts/example.com/httpdocs
X-Robots-Tag-Header einer URL prüfen
$curl -s -o /dev/null -D - https://example.com/ | grep -i '^x-robots-tag'