明成化四年，时任太子太保、户部尚书的襄城县籍人李敏，因母亲去世，回乡守孝3年，在此期间，他经常漫步紫云山，见山色幽静迷人，遂建造3间书屋，用于读书讲学。成化十八年，皇帝下诏赐名“紫云书院”，并扩建殿宇堂斋，成为当时中原四大书院之一。