โดยทั่วไปมักไม่เติมนมลงในชาเอิร์ลเกรย์ดังเช่นชาอื่น ๆ ชาวสหราชอาณาจักรส่วนมากให้ความเห็นว่าชาเอิร์ลเกรย์และนมนั้นไม่อาจเข้าด้วยกันได้ เนื่องจากนมทำให้กลิ่นของน้ำมันมะกรูดอันเป็นเอกลักษณ์ของชาหายไป อีกทั้งทำให้รสชาติของชาเปลี่ยน ดังนั้นจึงไม่นิยมเติมนมลงในชา

ชาเอิร์ลเกรย์นิยมทานขณะชายังร้อน โดยสามารถเติมน้ำตาลหรือน้ำผึ้งเพื่อเพิ่มความหวานหรืออาจเติมมะนาวหรือส้มได้ตามแต่ใจผู้ดื่ม