La Casa de los Señores de Ribera fue mandada edificar en 1604 por don Pedro Manuel Girón de Velasco, II marqués de Peñafiel, en el centro de una extensa finca que llegaba hasta en frente de la Casa del Mayorazgo de los Pérez de la Torre. Aunque la casa ha sufrido remodelaciones, la fachada de piedra y ladrillo se encuentra intacta.