อำเภอแก่งกระจานมีพื้นที่รับผิดชอบประมาณ 2,500.478 ตารางกิโลเมตรหรือประมาณ 1,562,799 ไร่ ซึ่งเป็นอำเภอที่มีพื้นที่มากที่สุดของจังหวัดเพชรบุรี โดยคิดเป็นร้อยละ 40 ของพื้นที่จังหวัด มีอาณาเขตติดต่อกับเขตการปกครองข้างเคียง ดังนี้

• ทิศเหนือ ติดต่อกับอำเภอหนองหญ้าปล้อง
• ทิศตะวันออก ติดต่อกับอำเภอบ้านลาดและอำเภอท่ายาง
• ทิศใต้ ติดต่อกับอำเภอหัวหิน (จังหวัดประจวบคีรีขันธ์)
• ทิศตะวันตก ติดต่อกับเขตตะนาวศรี (ประเทศพม่า)