มีถิ่นกำเนิดใน เอเชียตะวันออก ในทางใต้ของแม่น้ำแยงซีของ จีน ได้แก่ มณฑล ฝูเจี้ยน กวางตุ้ง กวางสี กุ้ยโจว ไห่ หนานหูหนาน เจียงซู เจียงซี เสฉวน ยูนนาน และ เจ้อเจียง โดยเฉพาะบริเวณภูเขาที่ใกล้กับฝั่งทะเล รวมทั้งญี่ปุ่น เกาหลี และฟิลิปปินส์ในป่าตรงจุดที่มีความลาดชันของเนินเขาและหุบเขา ที่ระดับความสูง 100–1,500 เมตร (330–4,920 ฟุต)[5][12][13] เมล็ดพันธุ์อาจถูกกระจายตามธรรมชาติโดย ลิงแสมญี่ปุ่น[14] และ ลิงกังยากุชิมะ[15]

หยางเหมย์เติบโตได้ดีในดินร่วนน้ำไม่ขัง พื้นที่ที่มีอากาศเย็น ทนต่อสภาพดินเลวที่เป็นกรด