จากตำนาน ในสมัยอยุธยาตอนปลายได้เกิดสงครามระหว่างกรุงศรีอยุธยากับพม่า กองทัพพม่าได้รุกรานมาจนถึงบ้านบางท่าไม้ในเขตอำเภอกระทุ่มแบน ฝ่ายชายต้องออกไปรบ เหลือแต่สตรี เด็ก และคนชรา จึงได้อพยพจนได้ซ่อนตัวที่วัดร้างแห่งหนึ่ง มีพี่น้องสองสาวคู่หนึ่งได้อธิษฐานกับพระประธานว่า หากรอดมาได้จะทำการบูรณะวัดแห่งนี้ จนสงครามสงบ ทั้งสองคนจึงกลับมาบูรณะวัด โดยพี่สาวได้สร้างวัดใหม่ ชื่อว่า วัดกกเตย (ปัจจุบันไม่มีวัดนี้) ส่วนน้องสาวได้กลับมาบูรณะวัดแห่งนี้ ใช้ชื่อว่า วัดพรหมจารีย์ราม ซึ่งต่อมาเปลี่ยนชื่อมาเป็น วัดน้องสาว และได้เพี้ยนมาเป็น วัดนางสาว ในชื่อปัจจุบัน[3]