Artikeln beskriver hur robots meta-taggar, data-nosnippet och x-robots-tag används för att styra hur Google indexerar och visar innehåll i sökresultat. Sidnivåinställningar kan specificeras via meta-taggar i HTML-sidor eller HTTP-huvuden, medan textnivåinställningar använder data-nosnippet-attributet. Specifika regler kan tillämpas för olika sökrobotar som Googlebot och googlebot-news för att exempelvis förhindra indexering (noindex) eller att följa länkar (nofollow). x-robots-tag HTTP-huvudet är ett alternativ för att kontrollera indexering av icke-HTML-resurser och kan kombineras med flera regler. Artikeln listar olika giltiga indexerings- och visningsregler som all, noindex, nofollow, noarchive, med mera, som kan kombineras.