Das Rittergut Herdringen wurde 1376 erstmals urkundlich erwähnt. Bis 1543 gehörte es der Familie von Ketteler, danach den von Westrem. Im Jahre 1618 kaufte es der Paderborner Fürstbischof Dietrich von Fürstenberg und vererbte es an seinen Neffen. Seitdem gehört das Anwesen den Freiherren von Fürstenberg. Zwischen 1683 und 1723 entstand die dreiflügelige Vorburg.