Akcia „Robots.txt Summit“ priniesla vášnivú diskusiu ohľadne pridávania špeciálnych tagov k obsahu či menu, ktoré by vyhľadávače neindexovali. Yahoo to už rieši špeciálnou triedou robots-nocontent
nakoľko sa z toho stane štandard alebo „dobrovoľne“ používaná vychytávka ako v prípade rel=nofollow
je otázkou. Samotný nápad použitia robots-nocontent
sa mi celkom pozdáva, nakoľko je jednoduché, napríklad:
<div class="robots-nocontent">
Toto je menu, ktoré nebude indexované
</div>
<p class="robots-nocontent">
Toto je odstavec, ktorý nebude indexovaný
</p>