พระเจ้าวรวงศ์เธอ พระองค์เจ้าจันทรกานตมณี เรียกโดยลำลองว่า "ท่านพระองค์หญิงห้า" หรือ "ท่านพระองค์ห้า"[1] ประสูติเมื่อวันที่ 24 กันยายน พ.ศ. 2455 เป็นพระบุตรพระองค์ที่หกและเป็นพระธิดาพระองค์ที่ห้าในสมเด็จพระเจ้าบรมวงศ์เธอ เจ้าฟ้าบริพัตรสุขุมพันธุ์ กรมพระนครสวรรค์วรพินิต กับหม่อมเจ้าประสงค์สม บริพัตร พระองค์มีพระอิสริยยศเป็น พระเจ้าวรวงศ์เธอ พระองค์เจ้า มาแต่แรกประสูติ เนื่องจากในปี พ.ศ. 2454 พระบาทสมเด็จพระมงกุฎเกล้าเจ้าอยู่หัว มีพระบรมราชโองการ โปรดเกล้าฯ ให้ยกพระบุตรของสมเด็จเจ้าฟ้าฯ กรมพระนครสวรรค์วรพินิตที่ประสูติแต่หม่อมเจ้าประสงค์สมเป็น พระเจ้าวรวงศ์เธอ พระองค์เจ้า ทั้งสาย[2]

พระเจ้าวรวงศ์เธอ พระองค์เจ้าจันทรกานตมณี เสกสมรสกับหม่อมเจ้าอรชุนชิษณุ สวัสดิวัตน์ พระโอรสในสมเด็จพระเจ้าบรมวงศ์เธอ กรมพระสวัสดิวัดนวิศิษฎ์ กับพระเจ้าวรวงศ์เธอ พระองค์เจ้าอาภาพรรณี เป็นพระโสทรานุชาในสมเด็จพระนางเจ้ารำไพพรรณี พระบรมราชินี มีโอรสธิดา 2 คน ได้แก่

1. หม่อมราชวงศ์เดือนเด่น สวัสดิวัตน์ สมรสกับหม่อมราชวงศ์สฤษดิคุณ กิติยากร
2. ศาสตราจารย์ ดร.หม่อมราชวงศ์ชิษณุสรร สวัสดิวัตน์ สมรสกับหม่อมราชวงศ์พร้อมฉัตร สวัสดิวัตน์ (ราชสกุลเดิม วุฒิชัย)

พระเจ้าวรวงศ์เธอ พระองค์เจ้าจันทรกานตมณี สิ้นพระชนม์เมื่อวันที่ 30 ธันวาคม พ.ศ. 2520 สิริพระชันษา 65 ปี