Esta casa palacio perteneció en la época de su construcción a la familia Fernández de Miranda, marqueses de Valdecarzana.
La fecha de construcción no está del todo clara, probablemente data de finales del XVI o principios del XVII. A lo largo del tiempo esta casa solar sufrió abundantes reformas que consiguieron embellecerla aún más.
El Palacio cuenta con una situación privilegiada a orillas del río Valdecarzana, en las afueras de San Martín. Hoy en día sus dueños son los herederos de Don Gerardo García.