@Gothika47 да е с htaccess става най-лесно и сигурно, само е дразнещо, че за всяка отделна директория трябва отделен файл в нея, но не е болка за умиране...
@Gothika47 ами след като бота мине още няколко пъти ще се обнови информацията и ще махне информацията за индексираните папки, а субдомейна би трябвало да..