Nhắc đến gia đình, dòng họ của ông, nhân dân xứ Nghệ có câu ca rằng: "Một nhà ba trạng nguyên ngồi, một gương từ mẫu mấy đời soi chung".