Cách đền vua Ðinh chừng 500m là đến đền thờ vua Lê Ðại Hành. Ðền nằm ở làng Trường Yên Hạ nên còn gọi là đền Hạ. Ðền soi bóng xuống mặt nhánh sông Hoàng Long. Trước mặt đền là núi Ðèn, sau lưng là núi Ðìa. Ðền được xây theo kiểu "nội công ngoại quốc" nhưng qui mô nhỏ hơn đền vua Ðinh. Qua Nghi môn ngoại (cửa ngoài) theo đường chính đạo lát gạch, phía bên trái là một hòn non bộ lớn, cao 3m tượng hình chim phượng múa, mỏ quay vào đền, hai cánh như đang bay.

Bên tay phải là nhà Tiền bái, ở mặt tiền có hòn non bộ "Hổ phục" gồm gốc cây duối thân to có 9 núi, tuổi thọ trên 300 năm. Bên trái nhà Tiền bái có hòn non bộ có dáng "voi quỳ" được khắc hai chữ Hán "Bất di".Theo đường chính đạo bên phải còn có hồ nước rộng. Qua Nghi môn nội (cửa trong) cũng 3 gian, theo chính đạo kiến trúc đăng đối là hai vườn hoa, tiếp đó là hai dãy nhà vọng. Ở giữa vườn hoa bên phải có hai non bộ "Phượng ấp", bên trái là hòn non bộ "Long Mã". Ở sân rồng gần gian giữa của Bái đường có long sàng bằng đá. Ðền có ba toà: toà ngoài là Bái đường, toà giữa là Thiêu hương thờ Phạm Cự Lượng, người có công với vua Lê Ðại Hành đặt ở chính giữa. Bên trái là tượng Lê Ngọa Triều tức Lê Long Ðĩnh (con thứ 5 của vua Lê Ðại Hành). Bên phải là tượng hoàng hậu Dương Vân Nga.

Ðiều đặc biệt ở đền thờ vua Lê Ðại Hành là nghệ thuật chạm khắc gỗ ở thế kỷ 17 đã đạt đến trình độ điêu luyện, tinh xảo. Ðền được xây dựng để tỏ lòng biết ơn của nhân dân đối với ông vua đã có công lớn lao trong việc xây dựng đất nước vào thế kỷ thứ 10.