La ville de Castelo Branco est dominée par les ruines d’un château datant de l’époque des templiers, et contient dans son patrimoine historique un beau parc vestige de l’ancien Palais épiscopal (très connu pour ses statues représentant rois et signes astrologiques).

L’électrification de la ligne de chemin de fer, et la construction de l’autoroute A23, rapproche la ville, jadis isolée, de la capitale.

La ville a donné son nom au castelo branco, fromage fabriqué dans la région.