แต่เดิมบริเวณนี้เป็นพื้นที่ป่าสงวนแห่งชาติคลองทุ่งมะพร้าว จนกระทั่งในปี พ.ศ. 2517 เริ่มมีกลุ่มคนอพยพมาตั้งถิ่นฐานจากต่างถิ่น พร้อมๆกับการสร้างฐานทัพเรือพังงา ด้วยเป็นชุมชนรอบค่ายทหารตามปกติ และตั้งชื่อว่าทับละมุ โดยมาจาก ทับ แปลว่าบ้านริมทะเล ส่วน ละมุ เป็นชื่อเครื่องมือประมงพื้นบ้าน ต่อมา วันที่ 25 พฤษภาคม พ.ศ. 2525 คณะรัฐมนตรีได้มีมติรับหลักการ ร่างพระราชกฤษฎีกาอุทยานแห่งชาติ ในการจัดตั้งอุทยานแห่งชาติหมู่เกาะสิมิลัน ในเขตป่าสงวนแห่งชาติคลองทุ่งมะพร้าว บริเวณฝั่งเหนือ ติดกับพื้นที่สงวนไว้ใช้ในราชการทหาร สถานีทหารเรือพังงา (ปัจจุบันคือ ฐานทัพเรือพังงา) สร้างเป็นที่ทำการของอุทยานแห่งชาติหมู่เกาะสิมิลัน ซึ่งยังผลให้ชุมชนทับละมุเจริญขึ้นตามลำดับ