Het kasteel Elsegem was gelegen in het landschap van Wortegem-Petegem.
Het werd in 1718 gekocht door de adellijke familie de Ghellinck, die het in de loop der eeuwen verschillende keren liet verbouwen en uitbreiden.
Het kasteel kreeg een classicistische stijl in de 18de eeuw en een neo-Vlaamse renaissancestijl in de 19de eeuw.
Het park werd in 1912 ontworpen in Franse stijl en strekte zich uit tot aan de Schelde.
Het kasteel overleefde de Eerste en Tweede Wereldoorlog, maar het werd wel zwaar beschadigd werd.
In 1973 werd het kasteel door een brand verwoest en later afgebroken.
Het domein bleef echter bewaard en werd in 1974 verkocht aan de gemeente, die het omvormde tot een openbaar park met speeltuinen, visvijvers, petanquebanen en wandelpaden.
De bijgebouwen van het kasteel, zoals de hoeve, de bibliotheek en de oranjerie, werden gerestaureerd en kregen een nieuwe bestemming als restaurant, trouwzaal, auditorium en archiefzaal.
Het domein de Ghellinck is vandaag de dag een oase van rust en natuur voor de bezoekers, die er ook meer kunnen leren over de geschiedenis en het erfgoed van Elsegem en Wortegem-Petegem.
Toen gisteren nog vandaag was 