Родился в 1693 году в большой семье из Нортумберленда, члены которой стали в 1688 году графами Дервентуотерскими по указу короля Якова II незадолго до его свержения. Его мать была незаконной дочерью Карла II и его любовницы Молль Дэвис; Чарльз имел в своих жилах королевскую кровь. Таким образом, он был кузеном Карла-Эдуарда Стюарта, прозванного «добрым принцем Чарли», и Джорджа Ли, графа Личфилда, другого незаконного внука Карла II; свою жизнь он посвятил делу Стюартов.