A história da presença judaica no concelho está agora inventariada e documentada neste centro interpretativo, apelidado em honra de Ephraim Bueno, um judeu nascido e Castelo Rodrigo, que foi médico, físico e escritor com grande relevância na corte dos Países Baixos.

A Casa da Torre foi construída no início do século XIV e na altura servia de residência aos bispos da Guarda. Eleva-se com grande esplendor na paisagem urbana da vila, demonstrando assim o grande poderio das instituições políticas e religiosas desde o tempo dos romanos até hoje. Hoje é um Centro de Estudos Arqueológicos. Nos três pisos encontramos peças arqueológicas recolhidas de vários lugares do concelho de Belmonte: no piso térreo estão em exposição achados dos períodos medieval e romano, com muitas moedas, objetos decorativos, aras, utensílios pessoais, decorativos, de caça e de guerra; no primeiro piso a exposição vai do século XV a XIX; no último piso existe uma oficina de restauro.

A notável Casa Grande ganhou o aspeto que tem hoje na segunda metade do século XVIII, quando o então proprietário, José Manuel Amaral, a mandou reedificar e ampliar, transformando a antiga casa senhorial numa casa fidalga, dando-lhe o rosto barroco. Na fachada principal destaca-se um brasão de armas e na fachada sul uma capela com pinturas a fresco oitocentista, representando a Anunciação e a Adoração dos Reis Magos nas paredes. O seu altar de talha dourada de tipo joanino e o teto feito em caixotões foi vendido, desconhecendo-se o seu destino. Foi vendida em 2007 e segundo o atual proprietário está a ser restaurada de acordo com o estilo original.