Começou pela Casa da Fraga, construída sob um enorme fragão, no ano de 1882 pelo santareno Alfredo César Henriques, o primeiro tísico tratado na Serra. Viveu aqui dois anos, por indicação do médico Sousa Martins, seguindo-se a construção dos «chalés», que hoje constituem a estância de férias.
Também nos tempos áureos da Primeira República, as Penhas Douradas atraiu para ali grandes nomes da política nacional como o caso do Dr. Afonso Costa, que ainda hoje mantém o «chalé».
O local das «Penhas» foi muito falado em certa altura dos últimos tempos da Monarquia, quando por ocasião de um eclipse do Sol, aqui estiveram a Rainha D. Amélia, mulher de D. Carlos, e seu Filho o Príncipe D. Luís Filipe.