ภรรยาชื่อ สุพร (ศรีอุทัยสุข) ดำรงเจริญ บัญชีบัณฑิต จาก จุฬาลงกรณ์มหาวิทยาลัย ปี พ.ศ. ๒๕๑๙ (รุ่นพระเทพฯ) เริ่มทำงานที่ องค์การสหประชาชาติ ประจำประเทศไทย สถานทูตสหรัฐอเมริกา ประจำประเทศสวีเดน และดำรงตำแหน่ง Deputy head of administration ของสถานเอกอัครราชทูตสหภาพยุโรป ประจำประเทศไทย (พ.ศ. ๒๕๔๖-๒๕๕๖)
มีลูกร่วมกัน ๒ คน คือ ผู้ช่วยศาสตราจารย์คมธรรม ดำรงเจริญ และนางสาวแพรใจ ดำรงเจริญ