Boerderijen aan Schoor 2 (Venspláts), Lollebeekweg 21 (Op ten Cleff) en Lollebeekweg 57 (Landschrijvershof), alle drie rijksmonumenten en van het hallenhuistype, teruggaand tot eind 17e/begin 18e eeuw.
Direct ten oosten van de dorpskern ligt de A73. Ten zuidwesten van Castenray ligt het 70 hectare grote natuurgebied Castenrayse Vennen rond het dal van de Lollebeek. Aan de westkant van Castenray ligt tegen de dorpsgrens de 'Castenrayse Berg'. Dit is een bosgebied met stuifduinen. Ook ligt daar het waterwingebied Breehei. Castenray ligt op een hoogte van ongeveer 25 meter.
De Lollebeek ontspringt aan de zuidwestkant van Castenray en mondt aan de zuidoostkant uit in de Groote Molenbeek. Bij de Castenrayseweg begint aan de oostkant van de A73 een mooie wandelroute die langs de meanderende Lollebeek en een waterplas van De Diepeling naar de Groote Molenbeek voert.