User-agent: *
Disallow: /cgi-bin # блокирует доступ к страницам 
                   #начинающимся с '/katalog'
Allow: /katalog # блокирует доступ к страницам 
                   #начинающимся с '/katalog'