Op deze plek aan de Nwe ’s-Gravelandseweg 38 stond vroeger villa Nieuwburg. Hierin werd op 24 april 1920 de lyceum afdeling gevestigd van de Luitgardeschool, een kostschool voor meisjes. In 1923 werden ook jongens toegelaten en ging de school het (Christelijk) Lyceum heten. In 1925 en 1934 werd de villa uitgebreid met flinke aanbouwen. In 1955 werd de villa gesloopt en het hoofdgebouw gedeeltelijk vernieuwd en aanmerkelijk vergroot. De naam werd toen gewijzigd in Willem de Zwijger College.