Khu đất ngày xưa từng là Đốc học đường, nay được Trung tâm Bảo tồn Di tích cố đô Huế sử dụng làm vườn ươm giống cây cảnh.
Thời vua Gia Long, Đốc học đường gồm một tòa nhà chính giữa và hai dãy nhà hai bên làm nơi giảng dạy của các đốc học, nơi học tập của giám sinh. Sau khi lên ngôi, năm 1820 vua Minh Mạng cho đổi tên Đốc học đường thành Quốc Tử Giám.
Vua Minh Mạng từng dụ rằng: "Trẫm từ khi lên ngôi đến nay, chăm chăm đến việc tác thành nhân tài, đặt nhà học, cấp lương cho giám sinh, gia ân cho học trò, ban phát sách vở, đều mong học trò thành tài để nhà nước dùng".
Năm 1821, vua Minh Mạng cho xây dựng mở mang thêm, gồm tòa Di Luân Đường 5 gian 2 chái; phía sau là giảng đường 7 gian 2 chái; hai dãy nhà học đều 3 gian 2 chái, xung quanh là tường thành bảo vệ. Năm 1848, triều Nguyễn xây thêm hai dãy cư xá cho giám sinh ở trọ, mỗi dãy 9 gian, cùng một vài phòng ở cho các viên tế tửu (hiệu trưởng), tư nghiệp (hiệu phó).