Neben den Pfarrern lebten auch die Küster mit ihren Familien auf dem Christenberg. Während der Pfarrer im 16. Jahrhundert im Tal in Münchhausen seinen Wohnsitz nahm, blieb der Küster mit seiner Familie noch bis in die zweite Hälfte des 20. Jahrhunderts dem Berg.
1292 wurde Konrad, Dekan auf dem Christenberg genannt. Gerlach von Bicken bezeichnet eine Urkunde von 1357 als Pastor der Pfarrkirche in Kesterburg und wenig später tauchte der Priester Gyso, Kämmerer des Stuhles zu Christenberg und Pfarrer zu Buchenau auf. Gottfried Wigand von Neukirchen wurde 1482 Pfarrer auf dem Christenberg genannt.
Vom Neubau des Küsterhauses nach einem Brand berichten schriftliche Quellen aus dem Jahr 1503. Gottfried von Hatzfeld war in diesem Jahr Pfarrer. Ihm folgte Johann Althaus bis 1528. Wigand Mog war der Pfarrer, der 560 Pestopfer in seiner Gemeinde im Jahr 1597 zu beklagen hatte, darunter auch seine Ehefrau. Er starb 1618. 1662 ist wieder ein Neubau des Küsterhauses belegt.
Während der Napoleonischen Kriege wurde das Küsterhaus am 9.7.1814 von Deserteuren in Brand gesetzt. Ein Neubau erfolgte erst 1817. Das Gebäude steht heute noch, wurde jedoch mehrfach umgebaut und modernisiert.