พระที่นั่งอิศเรศราชานุสรณ์ สร้างขึ้นในสมัยรัชกาลที่ 4 เดิมชื่อพระจันทร์ เป็นพระที่นั่งที่พระบาทสมเด็จพระปิ่นเกล้า เจ้าอยู่หัวโปรดเกล้าฯ สร้างเพื่อเป็นที่ประทับแบบชาวตะวันตก ด้วยไม่โปรดที่จะประทับในหมู่พระวิมานอย่างพระมหาอุปราช ในรัชกาลก่อนๆ ลักษณะของพระที่นั่งองค์นี้เป็นตึก 2 ชั้นแบบยุโรป ด้านหน้ามีบันไดทางขึ้นชั้นบนจากภายนอกอาคาร เพราะ ถือตามคติไทยโบราณว่า การทำทางขึ้นจากชั้นล่างภายในอาคารเป็นอัปมงคล ชั้นล่างของพระที่นั่งเป็นที่พักอาศัยของบรรดา มหาดเล็กพนักงาน โดยใช้ชั้นบนเป็นที่ประทับ ซึ่งแบ่งเป็นห้องต่างๆ 5 ห้อง ประกอบด้วย ห้องทรงพระอักษร ห้องรับแขก ห้องเสวย ห้องบรรทม และห้องแต่งพระองค์