A construción orixinal data do s. XVII, pero fixéronse reformas posteriores. Vinculado á familia Gayoso. Ten planta en forma de L. Muros de cadeirado granítico e tellado de tella. Destacan o patio interior cunha ampla escalinata e un corredor con balaústres pétreos e varios balcóns, o da fachada norte rematado por un arco conopial. En 1928 engadiúselle a Torre do Reloxo. Hai unha pequena praza diante do pazo que hoxe alberga as oficinas municipais, o xulgado e a biblioteca municipal.