บราวน์เกิดที่เมืองแอลเลนทาวน์ รัฐเพนซิลเวเนีย (Allentown, Pennsylvania) ในปี 1965[3] และเติบโตที่นั่น เขาจบการศึกษาจากโรงเรียนมัธยมวิลเลียม แอลเลน (William Allen High School) เขาชื่นชอบและหลงรักกีฬาและแฟชั่นตั้งแต่ยังเป็นเด็ก จากนั้นบราวน์ได้เข้าศึกษาต่อที่มหาวิทยาลัยน็อทร์ดาม (University of Notre Dame) ที่ซึ่งในปัจจุบันเขามีรายชื่ออยู่ในหอเกียรติยศศิษย์เก่า (alumni hall) l เขาจบการศึกษาด้านเศรษฐศาสตร์ และเคยเป็นสมาชิกทีมว่ายน้ำของมหาวิทยาลัย