Proteger a pasta "UPLOADS" !

Olá , como faço para proteger minha pasta de uploads?

tenho um localhost onde contem um sistema de upload de arquivos e gostaria de que esta pasta ficasse restrita ao acesso dos curiosos de plantão, tipo eu guardo o acesso dela com senha e tudo mais, mas se o cidadão digitar o endereço do localhost mais o nome da pasta, pá, chega nela e acessa todos os arquivos...

???