Huvudbyggnaden innehåller en paradvåning med bland annat norra Smålands största salong (cirka 100 m²), som i stora stycken återställts till ursprungsskicket. Kapellet i nygotisk stil är Sveriges andra miljö i denna stil.
Biografi
Under medeltiden fanns på platsen en by som hette Mem eller Mäm (stavades 1379 Mæm). Byn omfattade två gårdar och nämns första gången 1379 då en Olof i Mem var faste på häradstinget. Året därpå (1380) sålde Tyrgils Geme, borgare i Västervik och hans hustru Katarina, en mindre jordlott i byn till drotsenBo Johnsson Grip, som 1383 köpte mera jord i byn av Johan Moltke och dennes hustru Katarina Kettilsdotter Glysing och därefter lade alltsammans under Vinäs.
I början av 1600-talet ägdes Mem av Sidonia Grip, som gifte sig med sin kusin greveJohan Casimir Lewenhaupt. Denne lade samman alla gårdar på Norrlandet till ett enhetligt gods, fick 1618 säteriprivilegier på godset, byggde en herrgård med två flyglar och döpte säteriet till Casimirsborg efter sig själv.
År 1809 brann herrgården och 1829 byggde arkitekt Jöran Folke Oppman och byggmästare Jonas Jonsson den nuvarande byggnaden på uppdrag av greveparet Gustaf och Sophie Lewenhaupt. Efter hennes död 1849 såldes godset 1851 ur släkten Lewenhaupts ägo. Köpare var Carl Raab på Helgerum, som dock snart sålde det till häradshövding K. P. Karlsson. Han hann under sin korta tid som ägare samla ett omfattande kulturhistoriskt material om Casimirsborg och trakten omkring. 1860 köptes godset av överstelöjtnant Victor Fleetwood. Hans släkt stannade på Casimirsborg fram till 1912. Efter ett par ägarbyten, då godset reducerades genom avstyckningar, köptes det 1923 av Sten Hummerhielm, i vars ägor det stannade till 1979, då det köptes av familjen Elmqvist.
Sverige