Le Château d’Olsene est situé le long de la grande chaussée d’Olsene. Les deux pavillons de style espagnol sont parfaitement visibles à partir de la chaussée et donnent accès au domaine. Derrière ce trouve le château d’eau. A l’origine se trouvait un autre château à cette place, mais en 1854 le château fut reconstruit dans un style néo-renaissance flamand par le Baron et la Baronne Polydore Piers de Raveschoot-Surmont de Volsberghe. Le créateur était l’architecte connu Louis Minard. Le château a été construit au milieu de l’eau et devant un beau pont en pierre. Le tout a une fortification avec à l’intérieur une basse-cour avec écuries, chenil, un potager muré, une glacière et un superbe parc. Le domaine et les environs sont protégés. Malheureusement le domaine n’est pas accessible au public.