In 1922 ging voormelde congregatie over tot aankoop in Zenderen van een perceel heide, dat gelegen was aan de weg Borne-Bornerbroek, de tegenwoordige Retraitehuisweg. Met de bouw op dit perceel van het aan St. Jozef toegewijde retraitehuis werd in 1925 begonnen en kwam in 1926 gereed. Een jaar later werd er de eerste retraite gehouden. Zusters, behorende tot de congregatie van de Kleine Zusters van de H. Jozef, ontfermden zich over het huishouden. Ook namen zij de verzorging van de retraitanten op zich. In de jaren zestig van de vorige eeuw, toen de retraites in een rap tempo in aantal afnamen, veranderde de functie van het retraitehuis in een bezinningscentrum dat de naam Zwanenhof kreeg.