รอฌีเย เดอ เลอ ปัสตูร์ เกิดที่ตูร์แน (ปัจจุบันอยู่ในประเทศเบลเยียม) ระหว่างปี ค.ศ. 1399 ถึงปี ค.ศ. 1400 พ่อและแม่ของเขาชื่อ อ็องรี เดอ เลอ ปัสตูร์ และอาแญ็ส เดอ วาเทรโล อ็องรีและอาแญ็สมาตั้งหลักแหล่งอยู่ที่ตูร์แนก่อนที่รอฌีเยจะเกิด พ่อของรอฌีเยเป็นช่างทำมีด ในปี ค.ศ. 1426 รอฌีเยแต่งงานกับเอลีซาเบต โคฟฟาร์ต ผู้เป็นลูกสาวของช่างทำรองเท้าจากบรัสเซลส์ ทั้งคู่มีลูกด้วยกัน 4 คน สองคนแรกคือ กอร์เนลียึส (ซึ่งต่อมาบวชเป็นพระคาร์ทูเซียน) และมาร์กาเรตา ก่อนวันที่ 21 ตุลาคม ค.ศ. 1435 รอฌีเยกับครอบครัวก็ย้ายไปบรัสเซลส์ซึ่งเป็นที่เกิดลูกสองคนหลังคือปีเตอร์และยัน ตั้งแต่วันที่ 2 มีนาคม ค.ศ. 1436 รอฌีเยก็ได้รับแต่งตั้งให้เป็น "ช่างเขียนประจำเมืองบรัสเซลส์" ซึ่งเป็นตำแหน่งที่มีหน้ามีตาเพราะในเวลานั้นบรัสเซลส์เป็นที่ตั้งของราชสำนักของดุ๊กแห่งเบอร์กันดี ในโอกาสนั้นเขาก็เปลี่ยนชื่อจากภาษาฝรั่งเศส "รอฌีเย เดอ เลอ ปัสตูร์" ไปเป็นภาษาดัตช์ "โรเคียร์ ฟัน เดอร์ไวเดิน"