Transformar .php em .html

Boa tarde galera beleza ?

Tenho uma duvida sou novato em htaccess e gostaria de transformar:

http://www.meusite.com.br/teste/contato.php

Em

http://www.meusite.com.br/teste/contato.html

O arquivo .html não existe gostaria apenas que nao mostra-se o php e sim html.

Como eu faria isso no htaccess ? se alguem puder mandar uma material d estudo um link basico sobre o assunto gostaria muito de estar aprendendo... Valeu