เลดี้อลิซเกิดเมื่อวันที่ 25 ธันวาคม พ.ศ. 2444 ณ ตำหนักมอนทากิว กรุงลอนดอน เป็นธิดาคนที่ 3 ของจอห์น มอนทากิว ดักลาส-สก็อต ดยุกแห่งบักเคลิชและควีนส์เบอร์รี กับ เลดี้ มาร์กาเร็ต บริดจ์แมน จึงทำให้มีเชื้อสายผ่านทางผู้ชาย (แม้ว่าจะนอกกฎหมาย) โดยไม่ขาดสายของสมเด็จพระเจ้าชาร์ลส์ที่ 2 เลดีอลิซใช้เวลาในวัยเด็กอยู่ที่บ้านพักต่างๆ ในชนบท อาทิ ตำหนักโบตันในมณฑลนอร์แธมป์ตันไชร์ ปราสาทดรัมลานริกในมณฑลดัมไฟรส์และกัลโลเวย์ และโบฮิลล์ในมณฑลสกอตติชบอร์ดเดอร์ ได้เข้าเรียนในโรงเรียนเซ็นต์เจมส์ เมืองเวสต์มาลเวิร์น มณฑลวอร์สเตอร์ไชร์ และต่อมาก็ได้ไปประเทศฝรั่งเศสและประเทศเคนยา