хуже не будет
Напишите в адресной строке браузера Mozilla Firefox фразу: about:robots
:)