Шарль де Бац Кастельмор родился в 1611 году в замке Кастельмор возле Лупияка в Гаскони. Его отцом был Бертран де Бац, сын мещанина Пьера де Бац, присвоившего себе после женитьбы на Франсуазе де Куссоль дворянский титул, отец которого Арно Бац купил в графстве Фезансак Кастельморский \xabзамок\xbb, принадлежавший ранее роду Пуи. Этот \xabдоменжадюр\xbb (фр. domenjadur) — господский дом, представляющий собой двухэтажное каменное строение, сохранился до сих пор и находится на границе графств Арманьяк и Фезансак.

В бумагах королевских составителей генеалогий д’Озье и Шерена была найдена запись, что сам Людовик XIII пожелал, чтобы кадет гвардии Шарль де Бац носил имя д’Артаньян в память об услугах, оказанных королю его дедом со стороны матери, что уравняло Бац-Кастельморов, которые во всех отношениях стоят несравнимо ниже Монтескью, с Монтескью-Фезансаками. Шарль поступил в роту королевских мушкетёров в 1644 году, благодаря покровительству друга семьи — капитана-лейтенанта роты господина де Тревиля.