Conte por que você acha que a classificação de “robotstxt” deveria ser diferente. Citações de fontes ajudam.