A história do Romitello é estreitamente ligada à história de Roma. Onde hoje está a “Casa per Ferie” e o jardim, originalmente haviam diversas propriedades compostas de antigas casas residenciais e rurais, entre as quais o Romitello, a casa do “Sacro Cuore” e a casa “Villa Marcella”. Esta ultima, após a sua degradação, foi demolida para a contração de um novo edifício compatível com as novas exigências de uma cidade em forte expansão urbana, como era Roma na década de 60. Hoje, o atual edifício da “Casa per Ferie”.
Durante a segunda guerra mundial, o Romitello residiu uma família alemã, que por motivos de segurança construíram dois túneis subterrâneos; um do Romitello até um poço no centro da propriedade e o outro que unia a casa do “Sacro Cuore” ao mesmo poço. Estes dois túneis existem até hoje.
Nos anos 50, a Congregação das Irmãs da Imaculada Conceição de Castres decidiu comprar o terreno para estabelecer a Procuradoria Geral da Congregação, respeitando assim um velho desejo exprimido pela Madre Fundadora em maio de 1853, e também pela Santa Sede para facilitar as relações eclesiásticas com a Congregação. Depois de ter adquirido a casa do Romitello, nos anos posteriores foram compradas as outras casas até completar a atual propriedade.
A Congregação foi fundada em 1836 por Emilie de Villeneuve, filha de nobres franceses. O seu ideal era seguir Jesus Cristo e servir aos pobres, e que todas as atividades, diretas ou indiretas, da Congregação tivessem esse fim.