Для поискового бота Yahoo! можно указать участки XHTML-кода, которые не содержат значимый контент (например, меню сайта, счетчики и пр.).
Web страницы включают в себя шапки, подвалы, навигационные секции, стандартные тексты, копирайты, которые доступны для пользователей, но не нужны в поисковой выдаче. Теперь вебмастера могут применить класс "robots-nocontent", указывающий боту Yahoo! исключить из индексирования указанный контент.
Подробнее здесь ...
http://help.yahoo.com/help/us/ysearch/slurp/slurp-14.html.