Em 1849, adquiri a Quinta dos Loureiros, na Estrada do Lugar de Benfica, que passei a chamar de Beau Séjour. Mandei então construir este palacete de veraneio, que rodeei de vegetação exótica. Deixei estes bens à minha sobrinha, Maria Isabel Allen Palmeiro.

Nasci em Guimarães e emigrei para o Brasil onde fiz fortuna. Regressei a Portugal e em 1852 D. Maria II fez-me barão da Glória. Em 1859 adquiri esta quinta e fiz alguns melhoramentos. Leguei a propriedade aos meus sobrinhos, Maria da Glória Leite e José Leite Guimarães.

Com o meu irmão, José Leite Guimarães, herdei a Quinta do tio António, o barão da Glória. Aqui passei muitos verões. Deixei tudo à minha afilhada Celeste Dias de Almeida, casada com o Augusto Fernandes de Almeida.

Encomendei, com a minha irmã Maria da Glória, a decoração interior do Palácio a vários artistas amigos, alguns deles do conhecido Grupo do Leão.

A convite do meu bom amigo José Leite Guimarães, pintei, decorei e coordenei as obras de embelezamento dos interiores do Beau Séjour.

São da minha autoria os tetos da Galeria de Pintura e da Sala de Música.

Os irmãos Leite contrataram-me para decorar algumas salas do Palácio com faianças artísticas da minha fábrica das Caldas. Os frutos e a caça acentuaram a beleza da fonte-lavatório e o candeeiro da Sala de Jantar muito lucrou com as parras e o verde-escuro.

Trabalhei na Sala de Jantar com os meus irmãos Rafael e Columbano. Encarreguei-me dos vitrais das sobreportas e dos ângulos do teto, que pintei com motivos vegetalistas e florais.

Fui convidado pelos irmãos Leite para O Carnaval de Veneza, a grande pintura perspetivada que cobre o teto do Salão Dourado, e para pintar a sanca de frutos relevados da Sala de Jantar.