Viel übrig geblieben ist nicht mehr von Penrith Castle, einer aus rotem Sandstein erbauten Burg – die wenigen Mauern aber sind imposant. Der Duke of Gloucester lebte hier einige Jahre, bevor er als König Richard III. gekrönt wurde.