ในบันทึกของ แอนนา ลีโอโนเวนส์ หรือ แหม่มแอนนา ครูฝรั่งที่รัชกาลที่ 4 ว่าจ้างมาสอนหนังสือแก่พระราชโอรสธิดาและเจ้าจอมหม่อม ได้บันทึกไว้ว่าเจ้าจอมมารดาซ่อนกลิ่น ธิดาของพระยาดำรงราชพลขันธ์ (จุ้ย คชเสนี) เจ้าเมืองนครเขื่อนขันธ์ (จังหวัดพระประแดงในอดีต) ชอบนวนิยายเรื่องนี้มาก ในบันทึกเล่าเหตุการณ์ตรงนี้ว่า “มิตรรักของข้าพเจ้าคนนี้ ยังมีความขยันในการศึกษาหาความรู้ เธอเรียนหนังสือฝรั่งกับข้าพเจ้าจนชำนาญ พอที่จะอ่านหนังสือฝรั่งได้เรื่องรายละเอียดถูกต้อง หนังสือที่เธอชอบอ่านที่สุดคือ ‘กระท่อมน้อยของลุงทอม’ เธออ่านแล้วอ่านอีก จนรู้จักตัวละครขึ้นใจหมดทุก ๆ คน เวลาพูดถึงบุคคลในเรื่องนี้ เธอจะเอ่ยราวกับว่าเป็นผู้คุ้นเคยของเธอมานานปีแล้วฉะนั้น” เข้าใจว่าเจ้าจอมมารดาซ่อนกลิ่นน่าจะประทับใจนวนิยายเรื่องนี้มาก ถึงกับเซ็นชื่อในจดหมายถึงครูแหม่มแอนนาว่า "Harriet Beacher Stowe Sonklin" (แฮเรียต บีเชอร์ สโตว์ ซ่อนกลิ่น)[9]

ในคำบอกเล่าของแหม่มแอนนานั้น เจ้าจอมมารดาซ่อนกลิ่นได้ทำการเลิกทาสในความดูแลของตน ประมาณก่อนปี พ.ศ. 2410 (ค.ศ. 1867) คือก่อนรัชกาลที่ 4 สวรรคตหนึ่งปี และก่อนที่ครูแหม่มแอนนาจะกลับออกไปจากสยาม และก่อนประกาศนโยบายและแนวทางเลิกทาสของรัชกาลที่ 5 ในปี พ.ศ. 2417 (ค.ศ. 1874) ประมาณ 7 ปี[9]