การเกิดอารมณ์เพศจากสิ่งเฉพาะมักเป็นที่ปรากฏชัดในช่วงเข้าสู่วัยรุ่น ในปัจจุบันวงการแพทย์และจิตวิทยายังไม่สามารถระบุเหตุผลที่ชัดเจนของรสนิยมทางเพศนี้ได้[5]

บางตำราอาจกล่าวว่าเป็นพฤติกรรมที่เกิดมาจาก การวางเงื่อนไขแบบดั้งเดิม โดยอ้างการทดลองบางชุดที่ให้อาสาสมัครชายถูกผูกพฤติกรรมแบบมีเงื่อนไขกับวัตถุเฟทิช เช่น รองเท้าบู๊ตส์ รูปทรงเรขาคณิต หรือ โหลหยอดเงิน พบว่าเกิดการกระตุ้นเร้าทางเพศในคอนเวนชันนาล เอโรทิคา (conventional erotica) ในระบบประสาท[6] อย่างไรก็ตาม จอห์น บอนครอฟท์ ผู้เชี่ยวชาญด้านเพศศึกษา ปฏิเสธว่าพฤติกรรมแบบการใช้เงื่อนไขอย่างเดียวไม่สามารถทำให้เกิดความปรารถนาทางเพศกับวัตถุได้ เขาเสริมว่าปัจจัยอื่น ๆ อาจส่งผลต่อการแสดงออกของความปรารถนาทางเพศกับวัตถุ เช่น ความผิดปกติระหว่างระยะการเรียนรู้เรื่องเพศ[7]

จากทฤษฎีการเรีบนรู้พฤติกรรมแบบฝังใจ (imprinting) อธิบายไว้ว่ามนุษย์เรียนรู้ที่จะจดจำลักษณะที่ดึงดูดทางเพศขณะที่ยังเป็นเด็ก ดังนั้นความปรารถนาทางเพศกับวัตถุอาจเกิดจากการที่ในวัยเด็กคลุกคลีหรือเกิดการฝังใจ (imprint) ที่ผิดไปว่าวัตถุว่าเป็นสิ่งที่ดึงดูดทางเพศ หรือจำกัดวัตถุที่ดึงดูดทางเพศเป็นวัตถุเฉพาะบางกลุ่มเท่านั้น[8]