เจ้าพระยานครศรีธรรมราช (น้อย) สมรสกับท่านผู้หญิงอิน ซึ่งเป็นธิดาของพระยาพินาศอัคคี เจ้าพระยานครฯ (น้อย) มีบุตรธิดากับภรรยาต่างๆรวมกันทั้งสิ้น 34 คน ยกตัวอย่างได้แก่;

• คุณหญิงน้อยใหญ่ เป็นเจ้าจอมมารดาน้อยใหญ่ ในรัชกาลที่ 3 ประสูติพระโอรสคือพระองค์เจ้าเฉลิมวงศ์ในพ.ศ. 2368
• คุณหญิงน้อยเล็ก เป็นเจ้าจอมน้อยเล็กในรัชกาลที่ 3
• คุณชายน้อยใหญ่ เป็นพระเสน่หามนตรี[9] ต่อมาเป็นพระยาพัทลุง ต่อมาเป็นเจ้าพระยามหาศิริธรรม (น้อยใหญ่) ต้นสกุลโกมารกุล ณ นคร
• คุณชายน้อยกลาง เป็นพระเสน่หามนตรี ต่อมาเป็นเจ้าพระยานครศรีธรรมราช (น้อยกลาง) เจ้าเมืองนครศรีธรรมราชคนที่ 4
• คุณชายน้อยเอียด เป็นพระเสน่หามนตรี ต้นสกุลจาตุรงคกุล
• คุณชายแสง เป็นพระภักดีบริรักษ์ ต่อมาเป็นพระยาอภัยธิเบศร์เจ้าเมืองไทรบุรี ต่อมาเป็นเจ้าเมืองพังงา
• คุณชายนุช เป็นพระเสนานุชิตปลัดเมืองไทรบุรี ต่อมาเป็นปลัดเมืองพังงา ต่อมาเป็นพระยาเสนานุชิตเจ้าเมืองตะกั่วป่า