เอฮุด โอลเมิร์ต มีภรรยา ชื่อว่า อลิซา โอลเมิร์ต อลิซา มีอาชีพเป็นนักเขียนนวนิยาย และ นักแสดงภาพยนตร์
พวกเขา มีบุตร-ธิดา ด้วยกันทั้งหมด 4คน และ ได้รับเลี้ยงธิดาบุญธรรมอีก1คน

• ธิดาคนโตของพวกเขา มีชื่อว่า มิชาล โอลเมิร์ต เธอเป็นผู้เชี่ยวชาญด้านจิตวิทยา และ ยังเป็นผู้ที่มีความคิดริเริ่มที่ดีอีกด้วย
  
• ธิดาคนถัดมา มีชื่อว่า ดานนา โอลเมิร์ต เธอมีอาชีพเป็น วิทยากรเกี่ยวกับวรรณคดี ที่มหาวิทยาลัยเทลอาวีฟปัจจุบัน เธออาศัยอยู่กับคู่สมรสของเธอที่ เมืองเทลอาวีฟ
  
• ลูกชายของพวกเขา ชื่อชาอูล โอลเมิร์ต เขาได้แต่งงานกับศิลปินชาวอิสราเอล และได้ใช้ชีวิตร่วมกันในนิวยอร์ก
  
• ลูกชายคนสุดท้อง ชื่อว่า อาเรียล โอลเมิร์ต ซึ่งไม่เคยรับราชการทหารมาก่อน แต่เขาก็สนใจเกี่ยวกับ วรรณคดีฝรั่งเศส ปัจจุบัน เขากำลังศึกษาอยู่ที่ เมืองปารีส
  
• ธิดาบุญธรรมของพวกเขา มีชื่อว่า ชูลิ โอลเมิร์ต เธอเป็นเด็กกำพร้าที่ถูกทิ้งจากมารดาตั้งแต่กำเนิด