Castillon occupe un site défensif constitué par une série de coteaux allongés en forme de serres, dominant à l'Ouest la plaine d'Arthez et au Nord celle du Luy-de-Béarn. Ce site fut exploité pour l'installation d'un camp romain. Le village est situé sur des coteaux boisés dominant au Sud la vallée de l'Aubin. Sur le territoire de la commune, la chapelle de Poeylas, aujourd'hui disparue, jalonnait l'ancien chemin de Saint Jacques de Compostelle.