พระบาทสมเด็จพระจุลจอมเกล้าเจ้าอยู่หัว ทรงพระกรุณาโปรดเกล้าฯ ให้สร้างหอเหมมณเฑียรเทวราชขึ้นในระหว่างปี พ.ศ. 2415 - 2419 ต่อมา มีการสร้างในครั้งที่ 2 เมื่อปี พ.ศ. 2423 เนื่องจากเหตุการณ์เรือพระประเทียบของสมเด็จพระนางเจ้าสุนันทากุมารีรัตน์ล่ม เป็นเหตุให้พระองค์สวรรคตพร้อมพระราชธิดาและพระราชโอรส(ธิดา)ในพระครรภ์ ดังนั้น พระบาทสมเด็จพระจุลจอมเกล้าเจ้าอยู่หัวจึงทรงพระราชวิตกว่า สมเด็จพระเจ้าลูกยาเธอ เจ้าฟ้ามหาวชิรุณหิศ จะทรงได้รับอันตรายจึงทรงบ่นว่าถ้าสมเด็จพระเจ้าลูกยาเธอ เจ้าฟ้ามหาวชิรุณหิศปลอดภัยจากการเดินทางในครั้งนี้จะทรงสร้างศาลถวายใหม่

เมื่อสมเด็จพระเจ้าลูกยาเธอ เจ้าฟ้ามหาวชิรุณหิศทรงปลอดภัยจากการเดินทาง จึงทรงพระกรุณาโปรดเกล้าฯ ให้ก่อสร้างศาลขึ้นมาใหม่ แล้วเสร็จเมื่อปี พ.ศ. 2432