Totalizando Registros

Pessoal,

To querendo aprender a fazer o seguinte, imaginei a seguinte tabela de pessoas

Pessoa - Cidade

Sérgio - BH

Silas - BH

Paula - BH

Samir - SP

Antonio - SP

Paulo - RJ

Gostaria de fazer um select que me fala o total de pessoas de cada cidade

Cidade - Total

BH - 3

SP - 2

RJ - 1

Como fazer isso?

Abraços!