De bouw van het kasteel werd voltooid in 1760. Er werden lokale materialen gebruikt: baksteen en witte steen uit Lezennes. Het was de thuisbasis van de Heren van Wambrechies, waaronder de familie Robert de Robersart, die het hun naam gaven. De laatste bewoonster was Juliette, gravin van Robersart, die in 1900 overleed. Het gebouw huisvestte later een brouwerij, een wasserij en een school. Nu is het een gemeentelijk gebouw. Achter het gebouw ligt een park van 7 hectare met een arboretum met 270 soorten struiken en 75 soorten rozen. De zogenaamde "graventuin" heeft 300 soorten sierplanten.