user-agent: *    # Первая строка. Комментарии, понятное дело, убрать
disallow: /cgi-bin/  #Не индексировать то, что в каталоге cgi-bin
disallow: /sources/  #Не индексировать то, что в каталоге images
disallow: /uploads/  #Не индексировать то, что в каталоге images