Baependy faleceu em 1847 no Rio de Janeiro, deixando grande fortuna para a esposa e filhos. No ano seguinte, hospedou-se na Fazenda o imperador D. Pedro II, que aí esteve especialmente para prestar condolências à Marquesa, retornando à Fazenda em várias oportunidades. Com a morte da Marquesa, em 1869, a Fazenda Santa Mônica foi herdada pelo filho Manoel Jacinto, o Barão de Juparanã. Antes de falecer, em 1876, o Barão alforriou 56 essoas de seu plantel de escravos. O Barão de Juparanã deixou Santa Mônica a seu irmão e sócio Francisco Nicolau, que, tempos depois foi condecorado com o título de Barão de Santa Mônica, casado com uma prima, Dona Luíza Loreto Vianna de Lima e Silva, filha do Duque de Caxias. Nesta ocasião, o Duque de Caxias mudou-se para a Fazenda, a fim de se retirar da vida pública e tratar da saúde. Muito idoso, Duque de Caxias faleceu no dia 7 de Maio de 1880.