A sua construção começou no século XVIII porém ficou inicialmente por terminar. Atualmente é um espaço museológico de divulgação cultural, tem expostos os tradicionais embutidos, muito característicos da marcenaria de Alpedrinha. É um espaço onde o visitante pode conhecer um pouco mais sobre o concelho do Fundão. Além disso, do seu terraço é possível ver toda a região de forma panorâmica.

Encontra-se ligado ainda à presença da Ordem dos Templários, estando neste momento parcialmente em ruínas. Erguido sobre um afloramento rochoso na vertente leste da chamada Serra da Gardunha, o Castelo de Castelo Novo é um exemplar da arquitetura militar no estilo gótico e manuelino, apresenta uma torre sineira e de menagem, e duas portas, uma delas do tipo cubelo sobre a qual se mantêm os mata-cães.

É um curioso e singular monumento lítico construído por volta do ano I d.C. Esta torre tem 12 metros de altura e três andares parciais, cuja função ainda não é bem clara. Algumas das hipóteses avançadas é que pode ter sido um templo, um prisão, um patretorium (tenda do general ou zona central de acampamento romano), uma mansio (hospedaria) ou mesmo uma vila romana.

A edificação remonta ao final século XII para o XIII. De estilo românico e gótico e com duas áreas de muralhas, esta igreja insere-se no que foi um importante marco defensivo em lutas travadas com Castela.