คำร่ำลือ ของ วังริมป้อมพระสุเมรุ

หลังจากที่สมเด็จพระเจ้าน้องยาเธอ เจ้าฟ้ากรมหลวงจักรเจษฎาสิ้นพระชนม์แล้ว จึงมีข่าวร่ำลือว่า วังนี้มีความเฮี่ยนมาก เพราะเนื่องมาจากพื้นที่นี้แต่เดิมเจ้าที่แรง จึงทำให้ไม่มีพระบรมวงศานุวงศ์พระองค์ใดกล้าเข้ามาประทับเลย ทำให้วังแห่งนี้กลายเป็นวังร้างและถูกรื้อลงเพื่อใช้เป็นบ้านเรือนของประชาชน