In mei 1945 openden de "Zusters van Maria" van Pittem de Neurologische kliniek Sint-Jozef te Pittem. Drie jaar eerder hadden zij het kasteel van de vroegere burgemeester, Joos de ter Beerst, gekocht. Dit deden zij in afspraak met dr. José Van Laere, psychiater uit Kortrijk, die op zoek was naar een plaats om een open ziekenhuis voor vrouwen op te richten. De kliniek breidde verder uit en vanaf 1955 werden ook mannen behandeld. Dr. Van Laere is hoofdgeneesheer gebleven tot 1980.

In 1976 werd een masterplan uitgetekend voor de modernisering van het gebouw, het aanbod en de werking.  De eerste fase werd in 1990 afgewerkt, de tweede in 1999.

In 2003-2004 werd het kasteel gerenoveerd, en in 2014 werd een nieuw onthaalgebouw in gebruik genomen.

Naar aanleiding van 50 jaar Pittem in 1995 verscheen het boek "Sint-Jozefskliniek Pittem 1945-1995, van Neurologische kliniek tot Centrum voor Psychiatrie en Psychotherapie.