ดอเรียเกิดเมื่อวันที่ 2 กันยายน พ.ศ. 2499[4][lower-alpha 1] ในครอบครัวแอฟริกันอเมริกันในคลีฟแลนด์ รัฐโอไฮโอ เป็นบุตรสาวของจีเนตต์ อาร์โนลด์ (Jeanette Arnold; พ.ศ. 2472–2543) กับอัลวิน แร็กแลนด์ (Alvin Ragland; พ.ศ. 2472–2554) สามีคนที่สอง[7] มารดาเป็นพยาบาล ส่วนบิดาเป็นพ่อค้าของโบราณตามตลาดนัด[8] ส่วนเจมส์และเน็ตตี อาร์โนลด์ ตาและยายของเธอประกอบกิจเป็นคนยกกระเป๋าและพนักงานคุมลิฟต์ในโรงแรมเซนต์รีจิส ถนนยูคลิดในคลีฟแลนด์ซึ่งเป็นโรงแรมเฉพาะคนผิวขาวเท่านั้น[7][9][10] เธอย้ายตามบิดาและมารดาไปลอสแอนเจลิสตั้งแต่ยังเด็ก[7]

เธอเข้าเรียนโรงเรียนมัธยมศึกษาแฟร์แฟกซ์ในลอสแอนเจลิส ต่อมาบิดามารดาหย่าร้างกัน ครั้น พ.ศ. 2526 บิดาสมรสใหม่กับเอวา เบอร์โรว์ (Ava Burrow) ครูปฐมวัย[11] ซึ่งภรรยาใหม่ของพ่อคนนี้มีอายุไล่เลี่ยกับเธอ และเธอยังคงสนิทสนมกันแม้จะหย่าร้างกับบิดาไปแล้วก็ตาม[12] แร็กแลนด์มีพี่ต่างพ่อสองคนคือโจเซฟ จูเนียร์ (Joseph Jr.) และเซาน์ดรา จอห์นสัน (Saundra Johnson) และมีน้องชายต่างแม่อีกคนหนึ่งชื่อจอฟฟรีย์ แร็กแลนด์ (Joffrey Ragland)[13][lower-alpha 2]