ฉลอง ภักดีวิจิตร สมรสกับสุมน ภักดีวิจิตรเมื่อปี พ.ศ. 2509 มีบุตรด้วยกันสามคนคือ เฉิด, กัญจน์ และบุญจิรา ภักดีวิจิตร[12] แต่ภายหลังสุมนเสียชีวิตด้วยโรคมะเร็งตับเมื่อวันที่ 12 เมษายน พ.ศ. 2557[13] และปลายปีหลังจากที่ภรรยาเสียชีวิตนั้น ฉลองได้สมรสใหม่กับ พิมพ์สุภัค อินทรี วัย 38 ปี โดยเข้าพิธีแต่งงานที่จังหวัดศรีสะเกษ เมื่อวันที่ 28 ธันวาคม[14] หลังจากที่ทั้งสองคบหากันตั้งแต่เดือนสิงหาคมปีเดียวกัน[15]